ちょっと気になってたところ、MFI後に検証して変わってたらちゃんとしてるなー

sndyll のブックマーク 2018/03/21 00:39

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/359636130/comment/sndyll" data-user-id="sndyll" data-entry-url="https://b.hatena.ne.jp/entry/s/note.com/webnoma/n/n566f7c6d6134" data-original-href="https://note.com/webnoma/n/n566f7c6d6134" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fnote.com%2Fwebnoma%2Fn%2Fn566f7c6d6134" data-user-icon="/users/sndyll/profile.png">［SEOクローラー対策］どのクローラーがrobots.txtの指示を無視しているのか？｜Webの間（ECサイト制作カスタマイズ）</a><br><p style="clear: left">ちょっと気になってたところ、MFI後に検証して変わってたらちゃんとしてるなー</p><a class="datetime" href="https://b.hatena.ne.jp/sndyll/20180321#bookmark-359636130"><span class="datetime-body">2018/03/21 00:39</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！

［SEOクローラー対策］どのクローラーがrobots.txtの指示を無視しているのか？｜Webの間（ECサイト制作カスタマイズ）

note.com/webnoma2018/03/05

インターネットの世界では検索エンジンを始め、SEOツールなど多種多様な目的でクローラーが徘徊し情報を収集しています。法律の専門家ではないので正しい解釈ではないかもしれませんが、ウェブ上でクローラーがコ...

2 人がブックマーク・2 件のコメント

他のコメントを読む

＼コメントがサクサク読めるアプリです／

はてなブックマーク

［SEOクローラー対策］どのクローラーがrobots.txtの指示を無視しているのか？｜Webの間（ECサイト制作カスタマイズ）

はてなブックマーク

公式Twitter

はてなのサービス