Googleは、決してrobots.txtを無視してはいない。ユーザーにとって提示したほうがよいページであるならば、中身を見ることなく存在だけは見せるようにしているのです。その多くは、ページにリンクが張られている場合

*SEO

ndiy103 のブックマーク 2009/10/29 08:45

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/17023401/comment/ndiy103" data-user-id="ndiy103" data-entry-url="https://b.hatena.ne.jp/entry/s/www.suzukikenichi.com/blog/why-pages-blocked-by-robots-txt-show-up-on-serps/" data-original-href="https://www.suzukikenichi.com/blog/why-pages-blocked-by-robots-txt-show-up-on-serps/" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fwww.suzukikenichi.com%2Fblog%2Fwhy-pages-blocked-by-robots-txt-show-up-on-serps%2F" data-user-icon="/users/ndiy103/profile.png">robots.txtでブロックしたページが検索結果に出るのはなぜ?</a><ul class="comment-tag" style="list-style: none; margin: 0px;"><li style="float: left">[<a href="https://b.hatena.ne.jp/q/%2ASEO">*SEO</a>]</li></ul><br><p style="clear: left">Googleは、決してrobots.txtを無視してはいない。ユーザーにとって提示したほうがよいページであるならば、中身を見ることなく存在だけは見せるようにしているのです。その多くは、ページにリンクが張られている場合</p><a class="datetime" href="https://b.hatena.ne.jp/ndiy103/20091029#bookmark-17023401"><span class="datetime-body">2009/10/29 08:45</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！