クローリングとは、Webサイトを検索のデータベースへ登録するために、クローラーというロボット(プログラム)がWebサイトの情報を収集することをいいます。 Googleなどの多くの検索エンジンは、それぞれの検索のデータベースに情報を登録しています。ユーザーが検索キーワードを入力した際にデータベースから検索結果として表示されるのです。 クローリングは、ただ待っていても行われますが、自社のWebサイトをより早く、すべてのページをクローリングしてもらうには、Google Search Consoleを使うのがベストです。 「クローラー」が情報を収集しやすいホームページかどうかを「クローラビリティ」といい、「クローラビリティ」を向上させることはSEOの一貫と考えられています。 本コラムでは、「クローラー」とは何かという基本と「クローリング」の仕組み、自分でクローリングをさせる方法までをご案内します。