SourceForge.net: PHPCrawl PHPCrawl is a class written in PHP for crawling/spidering websites. It supports filters, limiters, cookie-handling and other features. By overriding a special method of the class users can decide what should happen to the data the webcrawler finds. SourceForgeにて、PHPで書かれたクローラー用のクラスが公開されています。 クロール後、getReportメソッドで、 見つけたリンク数 見つけたファイル数 受信バイト数 のような値を取得することが出来る模様。 クラスリファレンスはここにあ