SOINNで手書き数字MNISTをクラスタリングしてみた - verilog書く人最近ちょいちょいニュースで見かけるようになったSOINN株式会社の機械学習アルゴリズムSOINNを試しました。 コードはこちらのtrain_mnist.pyです SOINNとはSelf-Organizing Incremental Neural Network（自己増殖型ニューラルネットワーク)の略で、クラスタリング(データ群の中から、近しいもののグルーピングを行う)などに使われる機械学習アルゴリズムです。 ニューラルネットといっても、パーセプトロンのようにバックプロパゲーションで学ぶのではなく、k近傍法のように各データ点の距離を使って学習します。 特徴として ・教師なし学習 ・古いクラスタは適宜破棄されるのでオンライン学習に強い ・計算量が少ない ・事前にネットワークの構造を決定しなくて良い ・ノイズ耐性 といった点が上げられるようです。学術的なところはこちら参照。 実験 今回の実装はこ
