自由研究：フィード巡回ボットのHTTPリクエスト観察日記 | feedforce Engineers' blog夏の自由研究を9月頭に行ったので、その経過などをここで発表したいと思います。 １日目 フィードを巡回するボットが、どんなHTTPリクエストを行っているのか気になったので、HTTPリクエストのログを記録することにしました。 これから、ログを観察していこうと思います。 - どんなHTTPリクエストをしているのだろう？ - 知らないHTTPリクエストヘッダとかあるかな？ - 対応できていないHTTPリクエストヘッダとかあるかな？ ログを記録には、簡単なPHPスクリプトを使います。 - CGIで動作しているので、$_SERVER['HTTP_*']からHTTPリクエストヘッダを抽出します - スクリプトは最終的にフィードを返します - そのほか、必要に応じて修正していきます 巡回してもらうために、いくつかのフィードリーダーに登録しました。 - Google Reader - はてなRSS - Li
