高密度小池 ／ OreOre Twitter Search を作りましたOreOre Twitter Search を作りました http://twitter.ssig33.com/ OreOre Twitter Search 俺が俺の為に作った Twitter 検索です。今のところ検索出来るというだけで、他は何も出来ない感じです。 現状フロントエンドもバックエンドも Rails で書かれています。 フロントエンドは、 nginx の裏で unix socket で thin が動いているとかそんなので、まあ普通の Rails です。検索には Tritonn を使っています。 バックエンドでは、 AP4R で非同期化およびタスクの分割を行なって、 EventMachine で並列化をさせている感じです。現在、 2 万人弱をかなりリアルタイムに近い形でクロールしていますが、非同期化と並列化によってそれなりにスケールするクローラーになっていますので、
