クローキング、不正な JavaScript リダイレクト、誘導ページ - ウェブマスター ツール ヘルプフィードバックを送信 コレクションでコンテンツを整理 必要に応じて、コンテンツの保存と分類を行います。 Google ウェブ検索のスパムに関するポリシー Google のスパムに関するポリシーは、ユーザーを保護し、検索結果の品質を高めることを目的としています。Google ウェブ検索の検索結果（Google がウェブ全体から検出したウェブページ、画像、動画、ニュース コンテンツなどのコンテンツ）に表示されるようにするには、Google 検索の全体的なポリシー、またはこのページに記載されているスパムに関するポリシーに準拠している必要があります。これらのポリシーは、Google 独自のプロパティに表示されるものも含め、すべてのウェブ検索結果に適用されます。 Google では、自動システムと、必要に応じて行われる人間による審査によって、ポリシーに違反しているコンテンツおよび動作の両方を検出して
クローラを作る技術と設計 (毎週のハンズオン勉強会資料)
