Webスクレイピング入門 - Articles Advent Calendar 2011 Casual

Webスクレイピングとは？ 例えば、昇天するくらいかわいい猫画像ください : あじゃじゃしたーの猫の画像が欲しいときにどうすればいいでしょうか*1。画像を1つずつ手作業で保存？面倒くさいですね。 そんなときのためのWebスクレイピングです。まずはじめは、Web::Scraperというモジュールを使ってみましょう。 use strict; use warnings; use autodie; use File::Basename; use File::Spec; use LWP::UserAgent; use URI; use Web::Scraper; my $url = 'http://blog.livedoor.jp/chihhylove/archives/3573873.html'; my $scraper = scraper { process '.main img.pict, .

[undonature]

[web::query]

[clicktx]

[Web::Query][Web::Scraper][perl-casual]

[barlog]

22nd

[takepierrot]

Web::Query、楽に書けていいね。UserAgentも設定できないことはなさそう。

[hiratara]

Web::Query 知らなかったなあ。