Web::Scraper を読む - 御玉杓子スパイラル
perlどうも学習の為に読むと言うことが苦手だ. 実際に使ってみたモジュールをもっと使いこなしたいって感じで読むと読みすすむ. 読んでる間の様々なメモ シンボルまわり Sub::Installer とかそのあたりを使うか, 直接グロブ操作をするかイズフリーダムだと思った. ブロック内で有効なシンボルのエクスポートをするのに, エクスポートするのは, sub{ goto &process } みたいなん *{"$caller\::process"} = \&process だと, ブロックに入ったときスタブをおきかえるのが大変になる sub{ goto \&process } と sub{ goto &process } の違いはなんだろう? ( 前者はシンボリックな参照にはならない? ) result は極めてシンプルなクロージャ @res[@keys] = @{$stash}[@keys
Web::ScraperとPlaggerで鉄道運行状況を取得する - ぽっぺん日記@karashi.org(2008-12-28)
最高気温:12℃ 最低気温:3℃ _ Web::ScraperとPlaggerで鉄道運行状況を取得する JRの列車遅延情報を携帯にメールするようにしてみたのだが、私鉄の運行状況も取得したくなったので、私鉄をカバーしている鉄道運行情報 - livedoor 路線案内をスクレイプするスクリプトを書いてみた。 書いたものはCodeReposにcommit済み。 Plaggerから携帯にメールを飛ばす場合のYAMLはこんな感じ。 plugins: - module: Subscription::Config config: feed: - url: 'script:/path/to/plagger/assets/plugins/CustomFeed-Script/transit_livedoor_com_traffice_info.pl http://transit.livedoor.com/tr
Web::Scraper を利用して画像をたくさん手に入れるWeb::Collector なんてものを書いた | ブログが続かないわけ
■主な機能1. YAML を書くだけで簡単に大量の画像を手に入れることができる。 2. 過去に取得した画像(ファイル名でチェック)は取得しない。 3. たどるページ数を制限できる。 1. がこのモジュールの主旨。 2. の機能があるおかげで、取得した画像を整理したり、いらないものを削除したりしても、もう一度同じ画像を取得してしまうことがない。 3. 最初に取得するときはたくさんのページをたどるようにしてスクリプトをキックし、その後例えばcron で定期的にまわす場合などは、たどるページを1とかにすると相手のサーバにも負担をかけなくて良い。 ■使い方1. YAMLを書く (config.yaml)--- img_dir: /Users/junichiro/Pictures/e3 uri: http://www.e-3.ne.jp/image?p= max_cnt: 1 process: pr
Web::Scraperが便利 - Watsonのメモ
naoyaのはてなダイアリー - Web::Scraperを見て、Web::Scraperで遊んでみました。ミュージック-ORICON STYLEから、直近にリリースされる曲のデータを取得しています。 use URI; use Web::Scraper; use Encode; sub parse_date { my $node = shift; my $text = $node->as_text; $text =~ /^(\d+\/\d+)/; return $1; } sub scrape { my $uri = URI->new(shift); my $music = scraper { process 'div.m_release_top_2 table table', 'music[]' => scraper { process 'td[rowspan="2"] h3 a', '
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
今日のCPANモジュール（跡地） 目次
