タグ

テストとrobots.txtに関するmasakuma0812のブックマーク (2)

  • Google ウェブマスターツールの「robots.txt テスター」の使い方

    Google ウェブマスターツールの「robots.txt テスター」の使い方を紹介します。 1.はじめに Google ウェブマスターツールの「クロール」メニューにある「ブロックされたURL」というサブメニューが「robots.txtテスター」に変わったようです。 旧メニュー 新メニュー メニューを開いた画面での機能は大きく変わっていないかもしれませんが、エントリーで紹介したいと思います。 2.robots.txt テスター robots.txtテスターの画面は次のようになっています。 編集画面ではrobots.txtを編集することができます。 その下のテキストフィールドには、robots.txtでブロックの状態をテストしたいURLを設定します。 テストでのデフォルトは「Googlebot」になっています。 botは次の7種類から選択することができます。 3.URLのテスト 実際にUR

    Google ウェブマスターツールの「robots.txt テスター」の使い方
  • robots.txtやnoindexを使用してインデックス制御を行う方法

    SEO Imagination!ブログは、札幌で活動するフリーのSEOディレクター伊藤公助のブログです。SEOやSEMなどの情報を配信していきます。 最近、連続してテストサイトがインデックスされっ放しのサイトを見かけました。 パスワードをかけるなどして、クローラーのブロックをするといった対応もありますが、インデックス制御を行うだけでも、テストサイトのインデックスは防げます。 基的な内容ですが、簡単に利用可能なインデックス制御方法を記載しておきたいと思います。 テストサイトがインデックスされてしまっていたりしませんか? 割とよく見る、良くないインデックス状況の1つに、テストディレクトリが残っている、というものがあります。 これの何がいけないか?と言いますと、重複する内容のコンテンツになり、Googleからの評価が下がります。 また。テストページも検索結果に引っかかる可能性があり、訪れたユー

    robots.txtやnoindexを使用してインデックス制御を行う方法
  • 1