簡単！たった１３行のコードでHTML取得＆解析をするPerlスクリプト - DQNEO起業日記

１３行のコードで、Yahoo!Japanのトピックス一覧を取得する！ PerlでHTML取得・解析したいときはLWP::UserAgentとHTML::TreeBuilderというのを使うと簡単にできます。 LWP::UserAgentを使うと、Webページの取得ができます。 HTML::TreeBuilderを使うと、HTMLのDOM解析ができます。 この２つのモジュールを使って、Yahoo!Japanのトピックス一覧を取得してみましょう。 コメント行と空行を除くとたったの１３行です。 use strict; use warnings; use LWP::UserAgent; use HTML::TreeBuilder; # urlを指定する my $url = 'http://www.yahoo.co.jp'; # IE8のフリをする my $user_agent = "Mozilla

[Kshi_Kshi]

Perlでscrapingするとき。

[sy-41211]

perl HTML parser

[test_tester]

[HTML::TreeBuilder][HTML][DOM][user-agent][programming][sample]

[m6u]

ロボット収集に大活躍。

[TokyoIncidents]

mttn さんのコメント

[xiaodong]

ref: http://blog.livedoor.jp/zaki/archives/50329480.html

[jacoby]

［programming］Now browsing : 簡単！たった１３行のコードでHTML取得＆解析をするPerlスクリプト - DQNEO起業日記 :

[zetamatta]

曰く『HTML::TreeBuilderを使うと、HTMLのDOM解析ができます』

[plannner]

htmlのdivごとに抽出

[tiadeen2]

いまさらなぜスクレイピングが上がったの?!と思ったら、叩きの方がいっぱい＾＾；

[kkobayashi]

それWeb::Scraperで、と思ったらすでに突っ込み多数的な。

[orangevtr]

やたらこのURL見かけるので見たら普段からPerl使ってる人からしたら当たり前じゃん。。Perl食わず嫌いの人大杉ってのが垣間見える

[ryouchi]

phpによるスクレイピング入門に追加してみようかな・・・　http://www.usamimi.info/~ryouchi/scraping/

[anoncom]

目指せワンライナー

[MATSU]

koreha

[homajyu]

HTMLの取得と解析の方法

[homaju]

HTMLの取得と解析の方法

[fumix1223]

スクレイピングの参考

[hisaichi5518]

mojoliciousの最新版でもいい気がする。

[taroshin77]

html 取得コード

[nantan]

DOM、TreeBuilder、UserAgent

[design5]

・トピックス取得 ・スクリプト

[kulamochi]

スクレイピングが簡単に。

[doiman3d]

データ取得

[YoY]

html解析

[svankmajer]

HTML::TreeBuilder でスクレイピング

[chachan2197]

perl

[yasu_boy]

いいなこういうの

[saladdays]

クローラーが作れるってこと？？

[mattn]

Web::Scraper使いなよ