gooのWebクローラーに関する情報がgoo公式ページのヘルプに記載してありますので参考として載せておきます。 Webクローラー ↓↓↓ http://help.goo.ne.jp/help/article/704/ モバイル(携帯)クローラー ↓↓↓ http://help.goo.ne.jp/help/article/1142/ ちょっとツッコミどころが数か所あるんで 抜粋してみます。 >>Webクローラとは、インターネット上のWebサーバからWebページを網羅的に収集し、検索エンジンのデータベースに反映させるためのシステムです。「ichiro」は、NTTレゾナント株式会社が運用しているWebクローラの名称です。 >>「wakame」はNTTレゾナント株式会社が運用するデータ解析用Webクローラのうちのひとつです。 ichiro wakame すごいネーミングセンスだ・・・コ