http://japan.internet.com/wmnews/20070614/12.html

[yoshiii]

「クローラーは見る触る感じるといった能力をもたず、クッキーも利用しない。できるのは、ページをダウンロードし、テキストを探し、リンクをたどることだけだ。最も重い障害をもつサイト利用者と考えればいい」

[udy]

”クローラーにできるのは、ページをダウンロードし、テキストを探し、リンクをたどることだけだ。最も重い障害をもつサイト利用者と考えればいい”なるほど。