Whooshで始める全文検索的なもの(2)いろんなメモです。おもにプログラミング関係。 a memorandum. most of all contents are related to programming. 前回作ったのをGAEに乗せました。ファイルのロックがかけられなくてエラーになるので、そこだけ手を加えました(gae_fileindex.py, gae_filestorage.py)。 最初はIgoTokenizerで試していましたが、GAEに載せたらメモリ&時間食い過ぎで毎回インスタンスが停止されてしまうので、TinySegmenterに変えたらだいぶ良くなりました。 まあ、まだ試してないけど、GAEのStorageを使ってインデックスが作れるのでそっちを使った方が良いかと思います。GAEのStorageを使わないで、ファイルベースのインデックスをGAEで使うメリットは、ローカルで作ったインデックスがそのままGAEでも
WhooshのTokenizer追加
