Pynote

Python、機械学習、画像処理について

2018-08-17から1日間の記事一覧

Deep Learning - 逆伝播法の数式表現

概要 下記記事で紹介した逆伝播法を数式で表現することで、仕組みを理解する。pynote.hatenablog.com 概要 記号の定義 入力が1つの場合 第 層のデルタ 重みに関する偏微分係数 バイアスに関する偏微分係数 ニューラルネットワーク全体の式 ミニバッチの場合 …

Deep Learning - 逆伝播法

概要 ニューラルネットワークの学習は損失関数を最小化することで行われる。 最小化は勾配降下法により行われるが、このアルゴリズムを実行するには損失関数 に対する重み の勾配を求める必要がある。 逆伝播法またはバックプロパゲーション (back propagati…

Deep Learning - 全結合型ニューラルネットワークの数式表現

概要 下記記事で紹介した全結合型ニューラルネットワークを数式で表現することで、仕組みを理解する。pynote.hatenablog.com 概要 記号の定義 入力が1つの場合 第 層の入力 第 層の出力 ニューラルネットワーク全体の式 ミニバッチの場合 第 層の入力 第 層…