クローラーを If-Modified-Since 対応でトラフィックが 2/3 に減少 : 管理人@Yoski

MyRSS.jp のクローラーは「1～3時間に一回だし、動的ページも多いし、キャッシュも使っているので」ということで、長らく If-Modified-Since 対応（Webの更新有無をサーバーにたずねるオプションですね）していなかったのですが、先日効果を疑いながら 304 対応を実施してみました。 すると・・・ と、トラフィック （クローラーなので Inbound: 緑の部分です） が 2/3 に減少。 ・・・こんなに効果があるのなら早くからきちんと対応しておけばよかったです。 ＃「クローラーが 304 対応していないことがそもそもあり得ない」、というお叱りも受けそうで、ちょっとびくびくしながらのエントリなのですが・・ ^^; ＃そしてRSSの「配信」については、既に対応していましたが（言い訳） ちなみにページ配信側（クロールされる側）については、通常静的なコンテンツは If-Modif

[a6m5]

それまでは?AみたいにHEADで?

[akahigeg]

すごいね