Googlebotが404に再クロールするのは正常な動き、クロールバジェットを消費する心配なし[レベル: 中級] HTTP ステータスコードの 404 を返す URL に Googlebot がクロールを繰り返すことがあります。 これは正常な動きです。 404 ページの再クロールが、通常のページへのクロールに悪い影響を及ぼすことはありません。 404 への再クロールは後回し 404 を返す URL へのクロールがクロールバジェットを消費してしまうのではないかと、心配するサイト管理者に Google の John Mueller（ジョン・ミューラー）氏は次のように説明しました。 重要な URL をクロールし終わったあとに、そうした URL（404ページ）を通常はクロールする。よって、何も消費されない。 @miguelpau @davidwkelley @googlewmc We generally crawl those URLs after we've crawled the im
