そこが知りたい！検索エンジンの裏側

■ディープWebを検索する 検索エンジン各社はどこも、インデックスのサイズを大きくすることに苦心しているのはご存じの通り。そしてGoogleは、最近スタートさせた2つのサービス――Google SitemapsとGoogle Scholarによって、動的に生成されたWebページをもっとたくさんインデックスしようと考えているようだ。動的ページが数多くインデックスされれば、当然のようにインデックス全体のサイズもかなり大きくできる。 Yahoo!は最近、有料会員制のWebサイトを検索できるサービスの実験を始めた。会員制サイトはこれまで、検索エンジンが検索できない対象の1つだった。検索エンジンのクローラーからは見えない存在だったから、「ディープWeb」なんて呼ばれていたんだ。会員制サイトのコンテンツはタイトルやサマリー程度は見ることはできるけれど、内容を全文読むためには、コンテンツプロバイダーに料

[kyorecoba]

＞テレビ広告に使うカネを減らし始めている。