インターネットの検索エンジンを使うことで、膨大な情報を得ることができる。しかし、実際には検索エンジンではみつけられないWebサイトが多数存在する。そのようなWebサイトはディープWebなどと呼ばれる。 われわれが一般的に入手可能な検索範囲とは? GoogleやBingなど検索エンジンを使えば、多くの情報が得られることは常識ともいえる。しかし、インターネットには、これらの検索エンジンでは、検索できないWebサイトも存在するのだ。ほとんどの検索エンジンでは、クローラーを使い自動的にWeb上の文書や画像を収集している。しかし、検索エンジンがインターネット上のすべてのサーバーの情報を表示しているわけではない。このクローラーに情報収集をさせない仕組みの1つが、noindexメタタグである。 セクションに、noindexメタタグを挿入すると、検索結果には表示されなくなる。このようなWebサイトのことを
![知っておくべき"ディープWeb"の存在 - インターネットに広がる巨大な深層](https://cdn-ak-scissors.b.st-hatena.com/image/square/e2ba3887178eb463f03ee95d05f3e957f3a86107/height=288;version=1;width=512/https%3A%2F%2Fnews.mynavi.jp%2Ftechplus%2Farticle%2F20160817-deepweb%2Findex_images%2Findex.jpg)