モチベーション ディープラーニングにあらずんば人工知能にあらずな世の中でも、画像解析や自然言語処理などの非構造データではない、従来通りの構造データに限れば、古きよき機械学習手法はまだまだ手軽かつ高い精度を叩き出す。 例えばサポートベクターマシン、ロジスティック回帰、そしてランダムフォレスト 「でもランダムフォレストってパッケージを使ったことはあるし動作原理もなんとなく知ってるけど、実装したことはないな」 モチベーション完成 ランダムフォレストとは 簡単に言ってしまえば、決定木をたくさん作って多数決によって予測をおこなう手法。 まずは決定木がなんなのかを知らねばならない。 決定木とは 特徴量をひとつ選んでは閾値を決めてデータを分割することを繰り返すことで分類タスクをおこなう学習器。データがどんどん分かれていくさまが木っぽい。 (画像:Wikipedia より) 木を構成する要素にはノードとリ