PerlのWebページスクレイピング覚書 | work.log

Perl で Web ページをスクレイピングして、必要な情報を取得するための覚書です。 この手のサンプルは沢山あるので今更ですけども自分用のメモとして残しておきます。 スクレイピングスクリプトのサンプルコード Perl モジュールに、LWP::UserAgent と HTML::TreeBuilder を利用します。 依存モジュールも多く手動インストールは面倒くさいので cpan 等を使ってインストールすることをオススメします。 以下のよなスクリプトを書いて自分のブログでテストをしてみます。 ブログトップページに表示されるエントリータイトルを取得して表示するスクリプトです。 #!/usr/bin/perl use strict; use warnings; use LWP::UserAgent; use HTML::TreeBuilder; my $url = 'http://wg.dri