毎日新聞が検索エンジンを拒否!? メディアの自殺行為か 2008年07月10日08時20分 / 提供:PJ 写真拡大 「毎日デイリーニューズ」のホームページより引用 【PJ 2008年07月10日】− 「低俗すぎる」記事を掲載し問題になっていた毎日新聞運営の英語サイト「毎日デイリーニューズ」に、またしても波紋が広がっている。なんと、Google、Yahoo、MSNを始め、全ての検索エンジンの「クローラー」を拒否したのだ。 「クローラー」とは、検索のための索引を作るためのプログラムの事。「クローラー」が各種 Webサイトに自動的にアクセスし、ページの情報を取得(コピー)し索引を作成する事で、検索エンジンは成り立っている。しかし、検索エンジンに自分のページが掲載される事を好まない人もいるため「robots.txt」というファイルをサイトに置くことでアクセスを許可する/拒絶するなどのコント