はてなブックマーク

require 'yasuri' # "Rubyに関する新着投稿 - Qiita" を起点にする agent = Mechanize.new page = agent.get('http://qiita.com/tags/Ruby/items') # 最新3ページをスクレイピングする init_page = Yasuri.pages_init '//*[@id="main"]/div/div/div[1]/section/div[2]/ul/li[7]/a', limit:3 do # 現在のページ数 text_page_idx '//*[@id="main"]/div/div/div[1]/section/div[2]/ul/li[@class="active"]/a', proc: :to_i # 各エントリをスクレイピング struct_entries '//*[@id="main"

簡単なサンプルと解説を書いてみました． Yasuriでお手軽スクレイピング よろしければ使ってみてください＞＜ Yasuri とは Yasuri (鑢) は簡単にWebスクレイピングを行うための、"Mechanize" をサポートするライブラリです． Yasuriは、スクレイピングにおける、よくある処理を簡単に記述することができます． 例えば、 ページ内の複数のリンクを開いて、各ページをスクレイピングした結果をHashで取得する ページ内の複数のテキストをスクレイピングし、名前をつけてHashにする ページ内に繰り返し出現するテーブルをそれぞれスクレイピングして、配列として取得する ページネーションで提供される各ページのうち、上位3つだけを順にスクレイピングする これらを簡単に実装することができます． 例 require 'yasuri' require 'mechanize' # Nod

<なまえ> に "-"(ハイフン)が入ってるとネストした構成で生成される． プラグインなど既存のgemの拡張などは、"-"(ハイフン)で区切った名前にするとよい． 例) capistrano に対する capistrano-ext 単純に単語を区切る目的なら、"_"(アンダースコア) を使用するとよい. 次に <なまえ>.gemspec の以下を修正 spec.name gemの名前． <なまえ> にあわせておけばOK spec.summary 超簡単な説明 spec.description 簡単な説明 spec.homepage 特に作ってない場合はGithubのページを指定とけばOK spec.add_development_dependency 開発で使うgems．必要な分だけ並べる spec.add_dependency このgemを利用する際に依存しているgem. 必要な分だけ並