プログラムいらず！vimで手動スクレイピング - Qiita
Webページからちょっとデータ抜き出したいときありますよね。 1回だけしか行わず、わざわざプログラム組むほどでもないならVimでやるのがおすすめです。 例：はてぶのページからリンクを取得する vimを開いて4コマンドでリンクを抜き出します。 しかもエディタ上なのでその後の加工や連続スクレイピングなどもスムーズに行えます。 # 最初の行以外はどのサイトでも共通的に使えるはず :e http://b.hatena.ne.jp/ctop/it :%s/></>\r</g | filetype indent on | setf xml | normal gg=G :%v/<a/d :%s/^.*href="\([^"]*\)"[^>]*.*$/\1/ # 完全URLにしたいなら :%s/^\//http:\/\/b.hatena.ne.jp\//
おうちカクテルで学ぶWebスクレイピング - Qiita
クローラー／Webスクレイピング Advent Calendar 2015の16日目の記事です。 ・2015/12/16 追記 コメント欄にてriocamposさんにご指摘いただいた点を元に記事を修正しました。 ありがとうございます。 ・2017/07/06 追記 久々にコードを見たら酷いコードが残されていたのでリファクタリングしました。 GitHubにも置いてありますので、良ければ使ってみてください。 リファクタリングついでに、文章も修正して再アップロードしようと思います。 今回の目的 rubyでWebスクレイピングする際の処理を練習する。 ・特定のページからカクテル情報を収集する - カクテル名 - カクテルを作るのに必要な材料 - 作り方 ・持っている材料で作る事が出来るカクテルの列挙 準備 rubyとbundlerがあれば大体動くと思います。 ・ruby >= 2.1 ・bundl
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
