[レベル: 初〜中級] noindex robots meta タグが記述されたページはクロール頻度が通常のページよりも低くなります。 404ページと同様で、検索結果に表示するページではないとGoogleが判断しているためです。 noindexページのクロール頻度は低い 英語版のウェブマスター向けオフィスアワーで、次のような質問が投稿されました。 noindexがあるURLはインデックス可能なページよりもクロール頻度が低くなるのか? GoogleのJohn Mueller(ジョン・ミューラー)氏はこのように回答します。 低くなる。通常は、普通にインデックスできるURLよりも多少低い頻度でnoindexのURLをクロールしようとする。 404ページと同じようなもので、検索結果に表示できないページだと私たちはわかっている。 ときどき試しにクロールしようとするが、普通のページと同じような頻度では