検索デスク：視点：第3世代Web検索エンジンについて

[概要] Web検索エンジンの発展過程をコンテンツの処理方法により分類します。コンテンツの濃縮、一部処理、全部処理、そして現在は第3世代のコンテンツ間の関連性を処理、へと発展しています。 Web検索エンジン開発の歴史はインターネットの開始から数えてもまだ6〜7年しか経っていません。この間にWebコンテンツが爆発的に増加したため、検索エンジンの性能は短期間にも関わらず長足の進歩を遂げています。ここでは、その進歩の足取りをたどり、現状の検索エンジンについて理解を深めたいと思います。 . ロボット系といわれる検索エンジンは、(1)Webページを収集し、(2)それを索引化してデータベースを構築し、(3)検索要求に応じてランキングし、(4)検索結果を返します。ここでは(2)のデータベースを構築する際にWebページの内容をどのように取り込んでいるかという観点から、検索エンジンの発展過程を見ていきま