タグ

2015年8月23日のブックマーク (2件)

  • 特定のロボットのみクロール許可するrobots.txt記述 - ヲレサイト

    特定のロボットのみクロール許可するrobots.txt記述 久しぶりにアクセスログを見てみたら意味不明のアクセスがここ数日ドカンと増加していた。 うーむ。混乱に乗じてなんとか、ってやつかは分かりませんが( ̄▽ ̄|||) 脆弱性(MTのじゃないんだけど)を突いて改ざんしようとしてるようなクエリの付いたアクセス何かの情報をひっかき集めてるような絨毯爆撃ページクロール概ねこの2種類。今んトコ被害らしいものはないですが・・・ウザい。 htaccessで対応するんですが、クロールの方はrobots.txtを読みに来てる奴もいるのでこのご時世無駄なトラフィックを増やさないように書き方を工夫してみる。 従来はこんな書き方。 User-agent: * Disallow: /検索エンジンといえどダメなディレクトリ/ User-agent: 変なロボットA Disallow: / User-agent: 変

  • IPアドレスで日本国外(海外/外国)からのアクセスを制限する.htaccess CGI's

    に割り当てられているIPアドレスをAPNICより取得して、日国外(海外/外国)からのアクセスを制限する(禁止する).htaccessファイル又は一覧を作成します。 「IPアドレス表示」ボタンをクリックすると、日への割り当IPアドレスの一覧が表示されます。 「.htaccessダウンロード」ボタンをクリックすると、日へ割り当られているIPアドレスのみアクセスを許可する.htaccessファイルをダウンロードできます。 少し時間がかかります(数秒~数十秒程度)。 ブラウザやOSによって.htaccessをダウンロードするとファイル名の後ろに[1]と付いてしまったり、先頭のドットが消えたりするようです。その場合、お手数ですがサーバへ設置の際などファイル名を修正してください。 日への割り当IPアドレスはAPNIC(アジア・太平洋地域のIPアドレス割り当てを行なう機関)にて現在公開してい