行儀の悪い糞bot 行儀の悪い糞bot これは嫌がらせか? これは嫌がらせか? 今日はなんだかブログのカウンターが異常に上がってるなーって思ったのね。 ログ見たら見たこと無い糞botがクロールしてるのよ。 もうね、お行儀どころの騒ぎじゃないよこれ。 一日でこれだよ。異常だよ。 今月のGoogleのbotとの比較ね。 BaiDuSpider 6970+2 140.54 Mb 2006年 7月 28日 - 22:23 Googlebot 4046+28 62.44 Mb 2006年 7月 28日 - 22:58 +の後の数字はrobots.txtを読んだ回数。 BaiDuSpiderは今日になってから来始めた。 一日でGoogleの一か月分の倍近く読んでいくのかよ。狂ってるよ。 ちなみにそのログをほんのちょっぴり抜粋 これ見るとどれだけ異常で頭が