すぐやらなきゃいけないことと、それ以外と。 - 青空を探す、旅の記録。

月燈火のサーバ負荷がどうしようもない状況になってきたので、改修する必要が出てきた。何が足を引っ張っていたのかというと、登録されているフィードを巡回して新着記事を取得、要約して類似記事を探すという一連の処理。 この処理はcronで１日１回実行されているんだけど、従来の実装はこんな感じだった。 処理起動用のアクションをcronからcurlでキック アクションないで全フィードごとの巡回処理をAP4Rのキューに追加 AP4Rによって１フィードの巡回アクションがキックされる フィード内の新着ページが登録され、AP4Rのキューに次の３タスクが追加される ページの内容取得 文章要約 類似ページ検索 それぞれのタスクが消化される 綺麗にAP4Rを使った非同期実装。なんだけど、各タスクがRailsのアクションとして実行されると言うことは、それだけHTTPだのRailsだののオーバーヘッドが効いてくる上にdi

[h-yano]

AP4R...クライアントがいつ処理を要求するかわからない場合にはこれが最適。/夜間バッチ処理みたいなことをやる場合はscript/runner