WordPressやMovable Type等のCMSを利用する場合、検索エンジンにインデックス登録をされても必要でないページもあります。 WordPressやMovable Typeなどの場合は、管理画面(admin)ページは検索エンジンのクローラーに拾ってもらう必要はありません。 このようにクロールに巡回させないようにGoogleにお知らせするには「robots.txt」ファイルで設定します。 ▼「robots.txt」ファイルの説明はこちら http://www.kingsite.jp/blog/seo-sem/2014-60.php 検索エンジンのクローラーに巡回させたいか巡回させたくないかを定義できるファイルです。このファイルは公開状態になっているので誰でも見ることができます。 1. robots.txtファイルの設定方法 2. robots.txtファイルをアップロード 3.