cz500.com
通过金名网(4.cn) 中介交易 金名网(4.cn)是全球领先的域名交易服务机构，同时也是Icann认证的注册商，拥有六年的域名交易经验，年交易额达3亿元以上。我们承诺，提供简单、安全、专业的第三方服务！ 为了保证交易的安全，整个交易过程大概需要5个工作日。 具体交易流程可“点击这里”查看或咨询support@goldenname.com。 我要购买>> Process Overview: 4.cn is a world leading domain escrow service platform and ICANN-Accredited Registrar, with 6 years rich experience in domain name brokerage and over 300 million RMB transaction volume every year. We pro
PerlのWeb::Scraperを使ってTwitterのボットを作ってみた - そうだ車輪と名付けよう2nd
今更ながらにPerlのWeb::Scraperを触っていてなにか目的意識がほしいと言うことでTwitterのボットを作ってみました。ネタとしては「福岡市の新型インフルエンザに関する情報をポストするボット」と言うことで、福岡市 新型インフルエンザに関する情報から「福岡市内における新型インフルエンザ患者の発生状況」を引っ張ってきてポストすると言う単純なものです。@fukuoka_influとはいっても、さくら水産の日替わり定食献立表を取得する - noboruhiの日記 - Plaggerグループで公開されていたものをほぼコピー。変えたのはスクレイピングする対象の部分とFeedのEntryを入れなおすところくらい。特段といってはなんですが、あまり考えずに作っています。上手く設定できていれば1時間に一回チェックをかけに行くはずです。 いくつかの反省点 実行権限スクレイピングするために、Web::
Web::Scraperを使って、物件一覧をGoogle Mapsにマッピング : cotalog
福岡ファミリー向け物件特集！: ファミリー物件を見ていて、これはいいな、RSS登録するか。 と思ったのですが、このRSSはどうやら福岡の不動産情報探し・お部屋探しサイト「ムビマップ福岡」：こだわりの物件特集[賃貸版]: 物件一覧のようで、僕にはいらん情報も混じっておりました。 で、話題のWeb::Scraperでスクレイピングしてみるか。ついでに取得した一覧はGoogle Mapsにマッピングしてやるか。 というエントリです。 http://fooo.name/ からURL一覧を取り出すのにWeb::Scraper使ったけど、これは良いね scraper http://fooo.name/accounts/otsune してsでソース見てそれっぽくXPath書いてdumpして、データが取れてたらcでソース出して終了。イカス。 を参考にさせてもらいました。 まずは、 $ scraper ht
たった＊行のコードでHTML取得＆解析をしたい場合はWeb::Scraperが便利 - 酒日記 はてな支店
なんか無茶振りされたので。 簡単！たった１３行のコードでHTML取得＆解析をするPerlスクリプト を Web::Scraper というモジュールを使って書き直すと、こんな感じになります。 use strict; use Web::Scraper; use LWP::UserAgent; use Encode; my $scraper = scraper { process "#topicsfb li" => "topics[]" => "TEXT"; }; $scraper->user_agent( LWP::UserAgent->new( agent => "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; Trident/4.0)" ) ); my $result = $scraper->scrape( URI->new("http
Web::Scraper使ってみた - Unknown::Programming
id:naoyaさんが触ってるの見て面白そうなので僕も触ってみました。 Web::Scraper - naoyaのはてなダイアリー で何を取得してこよーかなーと思ったんですが、ちょーど今流行り？のFizzBuzz問題でブクマコメントがワンライナー大会になってるのでコード(っぽい)ものを取って来るやつを作りました。 #!/usr/bin/perl use strict; use warnings; use Web::Scraper; use Encode; use URI; use URI::Find; use Perl6::Say; my $url = 'http://b.hatena.ne.jp/entry/http://www.aoky.net/articles/jeff_atwood/why_cant_programmers_program.htm'; my $links = scr
Big Sky :: Web::ScraperなんかでXPathやCSSセレクタを決める時に便利かもしれないツール作った
Web::Scraper使うときに、scraperコマンドを使って頑張る人もいれば、FirebugのDOMツリーで「XPathをコピー」とやっている人もいるでしょう。 前者の場合、端末でスクロールアウトするHTMLを見ながらXPathをこさえて間違ったらズラズラズラ…と画面が流れて行ってしまいます。後者の場合は、CLASSやID属性を使わないXPathが出来上がってしまいます。 映画に出てくるHackerの如く一発でXPathを決められればそれは素晴らしい事だと思いますが、いかんせん幾度か失敗しますよね。 で、何回もXPathを確かめられるツールが欲しいなと思い、perl-GTK2で作ってみました。 画面はこんな感じ 引数に「http://b.hatena.ne.jp/」を付けて起動したらこんな感じ URLを変更して「Get」をクリックすれば再読み込みします。 そして、はてなブックマークト
Config::PitとWeb::ScraperとPlaggerで24時間365日のゲーム監視体制
序文 趣味のネットウォッチのために仕方が無く超便利なPerlを覚えようという感じの otsune です。そんなわけでコーディングの深い話はよくわからんので、今回はPerlとCPANを使ってネットウォッチを支援する手法について書きます。 ウォッチしたいWebページを機械的に監視できれば、あとはPlaggerなどの便利ツールを使って「メールを出す」「im.kayac.comでメッセンジャーにアラートを出す」「ピザを注文する」など好きな処理をすることが出来ます。 RSSフィードやAPIなどがあるWebサイトであれば特に苦労はしないのですが、今回取り上げるOgame.jpはウェブブラウザーゲームなので、フィードなど便利な機能はまったく存在しません。 そこでウォッチしたいWebページに対してWeb::Scraperを使ってYAMLを出力する短いスクリプトを書いてしまいます。 メールを出すなどのこまご
Plagger CustomFeed::Script mixiニュースのRSSを生成 - WEBデザイン BLOG
perlの勉強で、実益も兼ねてPlaggerを使って勉強中です。まず、 CustomFeed::Scriptを作りました。mixiニュース一覧からリンクを辿って、本文をを抜き出しRSSフィードを生成するスクリプトです。 web::scrper www::mechanizeを使っています。 mixiニュース一覧http://news.mixi.jp/list_news.pl アクセスランキング http://news.mixi.jp/show_ranking.pl?type=access 日記ランキング http://news.mixi.jp/show_ranking.pl?type=diary フォトランキング http://news.mixi.jp/show_ranking.pl?type=photo 上記4つのリスト一覧ページがあります。お好きなページのアドレスをスクリプトに追加する
Web::Scraper,PlaggerでMixiニュースをGmailへ送信 CustomFeed::Script for MixiNews - cool2ikou
web::scraperでmixi news一覧を抜き出すで実行したかったPlaggerを使ってのGmail送信。 試行錯誤の末なんとかうまくいきました。 前回のエラーの原因がわからず。 Plagger::Plugin::CustomFeed::Script [error] Error happend while executing '/usr/local/share/perl/5.10.0/Plagger/assets/plugins/CustomFeed-Script/mixinews_check.pl': -1 CustomFeed/Script.pmを見てみるも >|my $output = qx($script)
Web Scraper Shibuya.pm tech talk #8
The document discusses using Web::Scraper to scrape web pages in a robust, maintainable way by using CSS selectors and XPath queries rather than fragile regular expressions. Web::Scraper provides a domain-specific language for defining scraping processes and extracting desired data from web pages into structured results. Examples show how to scrape links, text, and nested data from HTML elements u
てきとうにクリックしたらてきとうにWeb::Scraperのコードを作ってくれるWebScraper IDE - bits and bytes
まえに作ったWeb::Scraperのjavascriptバージョンwebscraper.jsとXPathをてきとうに作ってくれる機能を追加したwebscraperp.jsにHTMLのドキュメントから繰り返し部分をみつけてSITEINFOをつくるAutoPagerize Iteration Detectorみたいなみためをくっつけて、取り出したい部分をクリックしたらてきとうにXPathを生成してWeb::Scraperのコードにして出してくれるFirefoxのextensionを作りました。Firefox3専用です。ごめんなさい。 ダウンロード WebScraper IDE (for Firefox3) 使い方 今回もいつもお世話になっているスターバックスさんの店舗検索結果(住所・店名・条件から探す)を例に使い方をご紹介します。 WebScraper IDEをインストールするとツールメニュ
hide-k.net#blog: Web::ScraperでCISCO RECORDSをスクレーピング
いまさらWeb::Scraperを使ってみました。 使うネタがなかったのがスルーし続けた一番の理由だったのですが、それではいけないと思い、CISCO RECORDSの商品情報を取得するスクリプトという、僕以外誰も興味がないスクリプトを書いてみました。 cisco_scraper.pl #!/usr/bin/perl use strict; use warnings; use Web::Scraper; use URI; use YAML; use Data::Dumper; my $uri = shift; my %scraper; $scraper{'link'} = scraper { process 'a', 'name' => 'TEXT'; process 'a', 'uri' => sub { return URI->new_abs( $_->attr('href'), $u
プログラ増田のあなぐら
40行で作るPerl用テンプレートエンジンPerlのClass::Data::Inheritableの解析[perl]「,」と「=>」の違いについて[perl]内部的に数値か文字かを判別するShift_JISにおける危険な文字まとめ[perl]autobox::Unix[PHP]PHPでPerlのqwを実現するお！[ruby]rubyでNabeAtzz敬意を払おう4Uの画像が美しすぎてPerlでプログラム組んでみた[perl][Moose]Moose？Mooseってなんだ？あれか？整髪料か？え？Perl？[perl]もういつでもどこでもだれでもMooseでいいじゃねぇかうんコード増田でリンク名付きでURL張ると化けるのでPHPの比較の素晴らしさ加減は正常PHPのあの関数をPerlでやるには？create_functionで生成された匿名関数の一覧を得る関数うたまっぷと歌ネットの歌詞をコピペ
Web::Scraper超便利
cles::blog 平常心是道 blogs: cles::blog NP_cles() « 夜中に人の家に突撃して、肉じゃがを作るオフ？ :: 国際競争力、24位に後退 » 2007/05/13 Web::Scraper超便利 perl scrape 87 2へぇ もう３年くらい前になりますが、Template::ExtractでWebのスクレーピングをするのが便利だという話がありました。で、当時作ったスクリプトが実はまだ某所で動いていたりするわけですが、いまやもっと便利なライブラリができてるんですねぇ。 naoyaのはてなダイアリー - Web::Scraper ばっちりですね。シンボルの書き方とかがちょっと違うところ以外は Ruby 版とほぼ等化。DSL 周りのドキュメントはまだないけどとりあえず scrapi のドキュメントを読めば ok! ＼(^o^)／ 時間はただ流れている
Web::Scraper - naoyaのはてなダイアリー
Today I've been thinking about what to talk in YAPC::EU (and OSCON if they're short of Perl talks, I'm not sure), and came up with a few hours of hacking with web-content scraping module using Domain Specific Languages. 使ってみたよ! #!/usr/local/bin/perl use strict; use warnings; use FindBin::libs; use URI; use Web::Scraper; use Encode; use List::MoreUtils qw/uniq/; my $links = scraper { process 'a.key
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://tsuyuguchi.com/masaaki/mt/archives/2009/03/11-2226.php
今日のCPANモジュール（跡地） 目次