RubyでHTML解析が超余裕なんです - 初心者エンジニアが何か書く
昨日ラーメン屋に行ってから，ずっと下痢気味＆頭痛い状態だったけど，今は割りと腹痛いだけで済んでいる． なんかRubyでHTML解析しようぜっという話が出てきたから，今日はその実装をしてみました． RubyのNokogiriというライブラリを使うと本当に簡単．超余裕です． んで，解析する対象となるページはこれ「http://umie.jp/news/event/」．神戸のイベント一覧が表示されたページ． イベント取得して，旅行者に提示してみるとかを今後やるつもり．（イベント数が多くないことは考えない） っというわけで以下は手順． 手順 1.このブログを読む． http://morizyun.github.io/blog/ruby-nokogiri-scraping-tutorial/#7 これ以上わかりやすい記事があるか，というぐらいわかりやすい良記事． ぶっちゃけこれだけ読めばHTMLの解
【Ruby】4Gifsの各ページをnokogiriでスクレイピング、GIFのURL取得 - ハイパーニートプログラマーへの道
【Ruby】4gifsのRSS取得、gifのURLを取り出す - ハイパーニートプログラマーへの道 この記事ではRSSのdescriptionからgifのURLを取り出した・・・つもりが動かないものだぞ！？ どうやらそのURLと、実際の個別記事のgifのURLは違うようだ。 要はRSSで表示された時のサムネイル的な画像なのかな？ （や、tumblrに投稿した時に動かないようだ。tumblr側で容量を圧縮しすぎてるからなのかな？ わからんですが） とにかく各個別記事にアクセスしてゲットせねばなるまい。ということで nokogiriインストール前の準備 OSX - Mac OS X Mavericksで”gem i nokogiri”失敗の解決方法 - Qiita こちらを見ていただくのが良いかと。 いざインストール、だが・・・ $ gem install nokogiri ERROR: Er
Rubyで簡単Web解析|NokogiriでHTML XMLパーサー - むかぁ～ どっと こむ
# -*- coding: utf-8 -*- require 'nokogiri' # HTMLページのロード ############################ # # 文字列の場合 html ="<html>...</html>" doc = Nokogiri::HTML(html) # fileの場合 File.open("test.html") do |f| doc = Nokogiri::HTML(f) end # webページの場合 open-uri利用 require 'open-uri' doc = Nokogiri::HTML(open('http://mukaer.com')) # xml doc = Nokogiri::XML(open('http://mukaer.com/atom.xml')) # 要素の検索 #######################
スクレイピングのためのNokogiri利用メモ - それはそれ、これはこれ
スクレイピングのチュートリアルを書いてみた。 参考：http://nokogiri.rubyforge.org/nokogiri/Nokogiri.html まだまだたくさんのクラスやメソッドがあるが(読んでない)、HTMLのスクレイピングに限定すれば多分これくらいで十分。 2014-02-16追記 なんかたくさんブックマークされていることに気づいたので、サンプルコードのRuby1.9/2対応のアップデート。 Mechanize周りも修正。WWW::Mechanize → Mechanize 等 (0) 前提知識 Ruby、HTML、DOM、CSSセレクタまたはXPath (1) クラス構造の理解 Nokogiri::HTML::Document < Nokogiri::XML::Document < Nokogiri::XML::Node < Object Nokogiri::XML::
RubyのNokogiriを使ってサイトをスクレイピングする - Think Big Act Local
Rubyのライブラリ「Nokogiri」を使ってみました。 Nokogiriとは HTMLやXMLをパースするためのRubyライブラリ XPathやCSSセレクタを使ったパースが可能 公式：http://nokogiri.org/ 試した環境 ruby 1.9.3 簡単なサンプル Qiitaにあがっていたものを拝借 - Nokogiriで文字化けを防ぐ - Qiita sample.rb # -- coding: utf-8 require "open-uri" require "rubygems" require "nokogiri" # スクレイピングするURL url = "https://www.walmart.com.br/" charset = nil html = open(url) do |f| charset = f.charset f.read end doc = No
Nokogiri の基本(翻訳版) - Engine Yard Blog JP | Engine Yard Blog JP
本記事は英語版ブログで2010年1月14日に公開された記事の翻訳版です。Engine Yard ブログでは少し趣向を変えて、コミュニティのメンバーによるゲスト投稿を募ることにしました。今回の (初めての!) ゲスト投稿は Aaron Patterson 氏によるものです。Ruby コミュニティの長年のメンバーである同氏は Nokogiri の作成者でもあります。Seattle.rb の開発者とともにコーディングに勤しむ一方、世界各地で行われる業界の会議やイベントに出向いて Nokogiri や他の Ruby 関連のトピックについて講演を行っています。 Nokogiri は XML ドキュメントと HTML ドキュメントを扱うためのライブラリです。Nokogiri は私の良き相棒 Mike Dalessio と一緒に開発しました。2 人とも Nokogiri を使って毎日 HTML や XM
プログラマのための言語別コーディング規約まとめ | Web活メモ帳
みなさんはコーディング規約を利用していますか。 個人で開発している時はオレオレルールで良かったのですが、 複数人で開発するようになると共通のルールがあった方がストレス無く開発が出来るようになります。 WEB系の言語のコーディング規約について、調べ物が必要だったので、 まとめたものをブログでもシェアします。 HTML・CSS Google HTML/CSS Style Guide の推奨ガイドラインまとめ HTML5 コーディングガイドライン（HTML5）ver1.0 JavaScript JavaScriptのいろいろなコーディングルールをまとめてみた PHP PHPのコーディング規約 PSR-0、PSR-1、PSR-2、PSR-3とは WordPress コーディング基準 Pear Manual :: 標準コーディング規約 Zend Framework PHP 標準コーディング規約 Ca
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
[Ruby] Nokogiri を使って、ページ内全ての a タグの href 属性の値を取得する![[Ruby] Nokogiri を使って、ページ内全ての a タグの href 属性の値を取得する](https://cdn-ak-scissors.b.st-hatena.com/image/square/8d71ff5111e05619a10d29bb40d7aebaa75c8fbc/height=288;version=1;width=512/https%3A%2F%2Fs0.wp.com%2Fi%2Fblank.jpg)