単純パーセプトロン

ニューラルネットワークを想定した場合の多変量関数の連鎖律について説明。入力から見た際の関数の伝達ルートが複数になる。変化させたいのは入力ではなく重み。

合成関数の微分(連鎖律)の証明を実施。途中、いろいろトリッキーなことをする。結果としては、中間変数を微分、中間変数での微分の組み合わせで表現しなおせるというもの。

合計関数の微分(連鎖律)について説明。まずは1入力1出力な合成関数。合計関数の微分をするための公式はあるが、一応証明もしてみる予定。

多変数関数の連鎖律に突入したが、これを理解するのに必要な知識があるため、それらを列挙。合成関数につい説明。単純パーセプトロンも入力層の内積、活性化関数、誤差関数の組み合わせが合成関数と言える。