Amazon Search のコンテンツ解析ロジックをリファクタリング中

Amazon Search サービスを開始してから約２年になりました。開始始めは 2004 年 03 月 07 日らしいんですが、自分でも覚えていません・・・ 細かい修正を含めるて数えてみたら、５２回目のバージョンアップになりますが、サーバの計算力も Pentium 4 から Athlon 64 X2 と大幅に向上したこともあり、コンテンツ解析部分の計算量を増やして、より適合度の高い関連商品が選択されるようにしてみました。 前より良くなってますよね？ （なってなかったらごめんなさい・・・） ※新しいエントリーもしくは古いキャッシュが消えるまでお待ち頂いてからご確認ください。 さて、計算量を増やす代わりに、形態素解析を ChaSen （茶筌）から MeCab に変更しました。MeCab は ChaSen の３〜４倍程度は高速に動作するので、全体としては速度的に速くなっているかもしれません。

[k1m]

MeCab 0.9 はけっこう良いらしい

[lt004036]

「更新が 2003 年で停止して、2.3.3 が最終バージョンとなっている ChaSen より、更新が続けられている MeCab に今後も期待です。」

[uemu]

形態素解析をChaSen（茶筌）から MeCab に変更しました。参考になりそう

[kasedac]

Amazon Searchの裏側。形態素解析をChasenからMeCabに変更

[uraito]

Googleの形態素解析はBASISのRosetteですが、その先のマッチングのロジックは不明ですね

[tsupo]

MeCab 0.9 系は、0.8 系以前とは根本的に設計自身が違うようでして、かなり満足のいく分かち書きをしてくれるようになりました。

[jmala]

2006/02/28 22:24:08

[lockcole]

Amazon Searchがパワーアップ。CPU変更に伴い精度向上，さらにChaSenからMeCabに変更したことでパフォーマンスも向上してるみたい。MeCabは0.9系で大きく設計が変わり，ChaSenをしのぐ出来になった模様。面白そうだなぁ。