トップページ スタッフブログ HTML 検索エンジンの巡回(クロール)を拒否 noindex、nofollowのmetaタグとrobots.txtの設定方法 ホームページを公開すると検索エンジンがアップロードしたページのクロールを行い、 公開したページがインデックスされるようになります。 そして、検索エンジンにインデックスされると検索結果に表示されます。 ホームページを制作しているとGoogleなどの検索エンジンからインデックスされないように設定することがあります。 例えば下記のような場合です。 テストで公開しているページ 管理画面などのログインページ コンテンツの内容が薄いページ 検索結果に表示されても意味がないページや検索されなくないといった場合、 robots metaタグやrobots.txtで検索エンジンを制御することが可能です。 今回はrobots metaタグの設定やrobo