Holiday CalendarsA B C D E F G H I J K L M N P R S T U V A
迷惑ボットMJ12bot/v1.4.5によるクロールをrobot.txtで停止する方法
急に増えたサーバ負荷と、異常に発生している404エラー このサイトではflentdとGrowthForecastを利用してサーバのログを可視化をしています。 「今日は少し重いかな」と思ってグラフを見てみると、数日前から3xxと4xx系のエラーが急増していました。 可視化の方法が知りたいという方は「サーバリソースをリアルタイムに監視するdstatのインストールと使い方」をご覧ください。 明らかにエラーが多すぎるのでサーバのログを見てみるとMJ12botというボットによる以下のようなログが大量に書き出されていました。 time:21/Jul/2015:08:10:44 +0900 host:198.27.66.194 request:GET /qa/tag/ada?login=google HTTP/1.0 status:302 size:20 referer:- ua:Mozilla/5.0
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
