[B! perl][spidering] BigFatCatのブックマーク

Webスクレイピング入門 - Articles Advent Calendar 2011 Casual

Webスクレイピングとは？例えば、昇天するくらいかわいい猫画像ください : あじゃじゃしたーの猫の画像が欲しいときにどうすればいいでしょうか*1。画像を1つずつ手作業で保存？面倒くさいですね。そんなときのためのWebスクレイピングです。まずはじめは、Web::Scraperというモジュールを使ってみましょう。 use strict; use warnings; use autodie; use File::Basename; use File::Spec; use LWP::UserAgent; use URI; use Web::Scraper; my $url = 'http://blog.livedoor.jp/chihhylove/archives/3573873.html'; my $scraper = scraper { process '.main img.pict, .

BigFatCat 2011/12/31

リンク

はてなブログ | 無料ブログを作成しよう

来年も作りたい！ふきのとう料理を満喫した　2024年春の記録春は自炊が楽しい季節 1年の中で最も自炊が楽しい季節は春だと思う。スーパーの棚にやわらかな色合いの野菜が並ぶと自然とこころが弾む。中でもときめくのは山菜だ。早いと2月下旬ごろから並び始めるそれは、タラの芽、ふきのとうと続き、桜の頃にはうるい、ウド、こ…

BigFatCat 2011/03/31

リンク

下心で覚えるエッチな Perl - 若妻サイト「舞ワイフ」をスクレイピングしてみた - おいちゃんと呼ばれています

BigFatCat 2011/03/10

リンク

Perl が覚えられて胸もキュンとなるコードを書いてみた - おいちゃんと呼ばれています

なんか Perl でスクレイピングする記事が話題になっているようでして。 -簡単！たった１３行のコードでHTML取得＆解析をするPerlスクリプト - DQNEO起業日記このブログの著者の人、いいな。と思う、ほんとに。僕も素直でありたいな、と。で、ちょっと遅くなってしまいましたが、便乗してみます。 **本日の教材ただ、短く○○行で書くとかは得意分野ではないので、おたのしみ画像を手に入れる方向にもっていってみました。次のサイトを教材に。 -なんでもちゃんねる : 胸がきゅんとする女の子の画像 - ライブドアブログ好みが合わなければ、サンプルコードの URL のところだけ変えてもらっても構いませんし。 **サンプルコード下記のコードで胸キュン画像を GET できます。 |perl| ! /usr/bin/perl use strict; use warnings; use Web::S

BigFatCat 2011/03/10

リンク

とんでもない美少女ソムリエが現れたので、Web::Scraper で萌え画像をぶっこ抜いてみる - おいちゃんと呼ばれています

本日の話題を全部もっていってる記事がコレ（↓）。 -うちのマンションの隣のベランダで女子高生がセッ○スしてる無題のドキュメント（いやいや、ちょっと待って。話は最後まで聞いて... m( )m 今回もいたって真面目な、Perl レシピのエントリーですから。） **とんでもない美少女ソムリエが現れた当該記事のタイトルのせいでこのエントリーは家族に見せられないものになってしまいましたが、誰もタイトルに触れないほどの驚愕の説得力で、美少女たちを解説しています（玄人）。 < 世の中の尻好きの皆さんお待たせしました。尻好きの皆さんに舞い込んで来る、ありきたりなビキニのデカ尻画像に辟易していませんか。私はしています。マジで。何も分かっていません。本当の尻好きを楽しませる画像と言うのは馬鹿みたいにテカテカの尻をさらす画像なんかではありません。ホットパンツでエロい尻ラインをさりげなく強調する画像なの

BigFatCat 2011/03/10

リンク

Web::Scraper を使ってURL からtitle を含んだ a タグを作成する | ブログが続かないわけ

タイトルの通りです。先日、Emacs でブログを書くときの補助ツールとして、URL から「タイトル付きのa タグを生成する」方法を紹介しました。そのときは、LWP 系が動かないというわけのわからないトラブルがあったため、WWW::Curl を使ったのですが、もともとはURI::Title を使っていました。 [参考] URI::Title が動かなくなったので代替手段を探った | ブログが続かないわけスクレイピングをするときにはいつでも問題になる文字コードですが、それはここでも例外ではありませんでした。そこで、文字コードの問題を内部的に解決できていて、かついろいろとつぶしが効くWeb::Scraper を使ったほうがいいと教えて頂いたので、それを使うことにしました。 Twitter / トミール: @jun_ichiro URIT itleを覚えておく ... @jun_ichiro UR

BigFatCat 2011/03/02

リンク

ゆーすけべー日記

サキとは彼女の自宅近く、湘南台駅前のスーパーマーケットで待ち合わせをした。彼女は自転車で後から追いつくと言い、僕は大きなコインパーキングへ車を停めた。煙草を一本吸ってからスーパーマーケットへ向かうと、ひっきりなしに主婦的な女性かおばあちゃんが入り口を出たり入ったりしていた。時刻は午後5時になる。時計から目を上げると、待たせちゃったわねと大して悪びれてない様子でサキが手ぶらでやってきた。お礼に料理を作るとはいえ、サキの家には食材が十分足りていないらしく、こうしてスーパーマーケットに寄ることになった。サキは野菜コーナーから精肉コーナーまで、まるで優秀なカーナビに導かれるように無駄なく点検していった。欲しい食材があると、2秒間程度それらを凝視し、一度手に取ったじゃがいもやら豚肉やらを迷うことなく僕が持っているカゴに放り込んだ。最後にアルコール飲料が冷やされている棚の前へ行くと、私が飲むからとチ