データマイニング・アルゴリズムのトレンド

HDDの大容量化と分散処理技術の発達でビッグデータの処理が容易になってきたので、ここ数年はデータマイニングが地味なブームになっている（NYT - For Today’s Graduate, Just One Word: Statistics）。2000年代前半のデータウェアハウスのブームではコンセプトだけが先走っていた（大園(2002)）ので、随分と地に足がついた感じだ。しかし人気のアルゴリズムを見ている限りは、まだ十分にデータ分析がされているように思えない。 1. 10年間でソフトウェア的に進歩 地に足がついていると言うのは、ソフトウェア的に色々な面で進歩が見られたことだ。ビッグデータの利用が可能になった事から、応用事例が増えているように思える。 1. 分散処理技術の進歩によるビッグデータの利用 ハードウェア技術の進歩による高速化も著しいが、分散処理技術の進歩はビッグデータの利用を容易に

[myrmecoleon]

「現在のデータマイニングの大半は分類だと言って過言では無いかも知れない。…統計解析としてはややいびつだ。」

[hiroomi]

「選択や結果の判断は人間が行っている。自動的に何かが出てくる事は無いし、実用上大きな意味のある結論を導きだすには、モデルを工夫する必要がある。」