積層自己符号化器の性能評価 - 人工知能に関する断創録

Theanoによる積層自己符号化器の実装（2016/1/22）の続き。 今回は、積層自己符号化器の事前学習（pretraining）の効果が本当にあったのか検証してみたい。ついでにもう一つTheanoによる雑音除去自己符号化器の実装（2015/12/9）で書いた雑音除去（denoising）の効果も本当にあったのか合わせて検証してみたい。 自己符号化器自体は教師なし学習で特徴抽出しか行わないためその特徴が本当に分類に役立つのか直接検証できなかった。前回実装した積層自己符号化器は最後の層にロジスティック回帰をくっつけることで抽出した特徴を用いてMNISTの数字認識ができるようにしたので認識精度を使って雑音除去や事前学習の効果が比較できる。 ソースコード全体はここ。 スクリプトの修正 前回の積層自己符号化器のスクリプトを少しだけ修正した。 メインの関数に事前学習を行うか行わないかのフラグ（pr