最近、Googleウェブマスターツールに登録してあるサイトを覗いていました。 するとこのようなメッセージが、「ウェブマスターツール」の「すべてのメッセージ」を確認した時に届いていました。 案の定、これが届いたサイトはアクセスすることができません。過去24時間でGooglebotがサイトのDNS情報の取得を行おうとしたけど不可能で、自動的にエラーの発生件数まで表示されるようです。 これもウェブマスターツールに登録している別のサイトで届いていました。今度は最初のものとは内容が異なっていることが分かります。Googlebotがrobots.txtへのアクセスを行ったところ、過去24時間でエラー1件が発生し、このファイル(robots.txt)に指定されているページはGoogleが自動的にクロールしないようしており、またエラーが取り除かれるまで延期されようです。 いずれも推奨される対処方法は、 サ
![ウェブマスターツール上でGooglebotがサイトにアクセスできない場合のメッセージ | クロスウォークのSEOブログ](https://cdn-ak-scissors.b.st-hatena.com/image/square/3ea3f3ef4a276c290da8ba78f651a424d0a365db/height=288;version=1;width=512/https%3A%2F%2Fblog.mf-seo.com%2Fwp-content%2Fthemes%2Fmf-seo%2Fimages%2Fogp-default.jpg)