エントリーの編集
![loading...](https://b.st-hatena.com/bdefb8944296a0957e54cebcfefc25c4dcff9f5f/images/v4/public/common/loading@2x.gif)
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
サーバに負荷をかける検索ロボット(クローラー)にアクセス制限をかけた!
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
![アプリのスクリーンショット](https://b.st-hatena.com/bdefb8944296a0957e54cebcfefc25c4dcff9f5f/images/v4/public/entry/app-screenshot.png)
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
サーバに負荷をかける検索ロボット(クローラー)にアクセス制限をかけた!
【この記事の所要時間 : 約 3 分】 Baiduspiderのアクセスを拒否する ここ最近、サーバーの負荷が突然... 【この記事の所要時間 : 約 3 分】 Baiduspiderのアクセスを拒否する ここ最近、サーバーの負荷が突然高くなることが何度かあり、おかしいと思ってログを調べてみたところ、「Baiduspider+(+http: //www.baidu.com/search/spider.htm)」というユーザーエージェントのアクセスが大量にあることが判明。 さっそくググってみたところ、このBaiduは中華系のサーチエンジンロボットだとか。中華系サーチエンジンロボットからの大量アクセスなんてリソースの無駄遣いにしかならないので、さっそくアクセス拒否しました。 これと似たような事例が発生したので、同じようにして、Baiduspiderのアクセス制限をかけました。 MSNとは別物のMSRBOTにもアクセス制限をかけました。 httpd.conf で以下のように設定。 SetEnvIf User-Age