XMLパースはPython速い。Ruby糞遅い。でもRubyにも希望はある。それはOx！ - new_pill’s blog
qiita.com rubyでも試してみた。 結論 rubyは糞遅い。この差はやばいね。pure rubyだと100倍違う。nokogiriでも5秒かかるとか。 これだけ見るとrubyはもうダメだ、という結論になってしまうね。 <追記> 悔しいじゃないですかぁー。いろいろためしましたよー。 Oxというのが良いカンジ。用途によってはNokogiriより使いやすい。速い。libxmlに依存していないらしい。インストールも速い。 遅いPythonぐらいまでは来ている。Oxで良いじゃんとなる。 www.reddit.com ライブラリを選ぶときは用途とかパフォーマンスを調べる必要がありますね。特に車輪の再開発が多いRubyでは。今回Oxというライブラリを初めて使い、今まではXMLパーサーはNokogiriしか考えたことなかったけど、ちょっと態度を改めるべきですね。っていうかNokogiriはインス
GemのいろいろXML/HTMLparserをまとめたい(Oga特集) - Qiita
動機 前に徹夜テンションのままとあるgemの紹介を書いたんだけど、いろいろとひどかったのでまじめにまとめたかったし新しいXMLパーサが出てきたので調べるついでにまとめてしまおうと思った。 ぱーさいろいろ 冷静に思い出すと結構ある rexml rubyの標準ライブラリ普通に使う分には申し分ないやつ DOMParserからSAXParser、PullParserと一通りそろっている とりあえずこれでなんとかなるケースは多い Nokogiri HTML/XMLパーサでなんだかんだ一番人気？ CSSで要素を取り出せるのでHTMLのパースに使うといい感じ libxml使います HappyMapper XMLをオブジェクトにマッピングできるパーサ クラス作っとけばうまいことマッピングできるのでおすすめ （以前HappyMapperを紹介したけど糞記事すぎて申し訳ないしもはや恥ずかしくて見ることすらでき
Ogaってゆー新しいXML/HTMLパーサーについて - Qiita
OgaというXML/HTMLパーサーがありました。 XML/HTMLパーサーには、標準のREXML以外にもすでにNokogiriやOxがありますが、 Rubiniusでうまく動かなかった(GVLでロックされないから？)ので、極力C拡張を使わずに作ったものだそうです。 MRIでもNokogiriのインストールは時として鬼門になったりするので、ナイスな代替があれば嬉しいかも。 機能とか特徴 XMLとHTML(5)のパース DOMパース ストリーム/プルパース SAXパース 少ないメモリ消費量 高パフォーマンス。パフォーマンスが十分に出てなければそれはバグだ。 XPath 1.0のサポート XML名前空間のサポート らしいです。 インストール いつものように。
(ヽ´ω`) < 1. XML(HTML)文章からDOMを作成 - (ヽ´ω`) < 助けてほしいマン
(ヽ´ω`) < DOMを作成 DOMを作成するにはNokogiri::XMLかNokogiri::HTMLを使う。 引数としては読みだし可能なIOストリームならなんでもOK。 (ヽ´ω`) < 入力ソースの文字コードを指定する Nokogiriではオブジェクトが内部で保持するデータは常にUTF-8であり、メソッドが返す値も常にUTF-8となる。 入力ソースの文字コードは、Nokogiri内部で使われているlibxml2によって自動判別されるが、常に正確とは限らない。 明示的に入力ソースの文字コードを指定したい場合は、以下の方法で指定する。 1つ目の引数に入力ソースを、3つ目の引数に文字コードを文字列で渡してやる。 2つ目の引数は、libxml2的には入力ソースのURIを渡されることを期待しているが、nilでもOK。 (ヽ´ω`) < DOM作成時にオプションを渡す Nokogiri::(
Nokogiriでスクレイピング - Qiita
nokogiriとは gemで提供されているスクレイピングライブラリのこと。 公式サイト http://nokogiri.org/ install gemでインストールする。 使い方 使い方はとにかく簡単。 スクレイピングしたいページにアクセスし、HTMLを取得してきた後、nokogiriを通して各要素にアクセスする。 要素へのアクセス方法は、XPathというものとCSS記法によるものがあるらしいが、普段使い慣れているCSSが使えれば十分だと思った。 サンプル require 'nokogiri' require 'open-uri' html = Nokogiri::HTML(open('https://www.google.co.jp/')) logo = html.css('#hplogo').first # id="hplogo" logo.name # タグ名 logo.attr
Nokogiri で XML のパース導入編 - seratch's weblog in Japanese
「Ruby で XML をパースしたい」ということで（蛇足気味ですが）調べたメモを公開します。 公式ドキュメント http://nokogiri.org/ https://github.com/tenderlove/nokogiri 前提条件 libxml2 と libxslt が必要です。CentOSであれば以下のように準備します。 yum install libxml2-devel yum install libxslt-devel Windows の場合はここから ftp://ftp.zlatkovic.com/libxml/ 「libxml2-2.7.8.win32.zip」を解凍してできた「bin/libxml2.dll」を「libxml2-2.dll」にリネームして「%RUBY_HOME%/bin」に置く。 「libxslt-1.1.26.win32.zip」を解凍してできた「
Nokogiriメモ。XMLを解析する - ぽひゅっとメモ
別途で、XMLファイルを出力するのも書きます(次の日記) まず今回の日記は Nokogiriでxmlファイルを読み込む･解析のやり方について(メモ程度)。 抽象的すぎて良い例ではないですが、こんなXMLがあったとする <xml_node> <test_node type="a"> <hoge> <hoge_child>hoge1</hoge_child> <hogehoge>hoge2</hogehoge> </hoge> <fuga>fuga1</fuga> <piyo>piyo1</piyo> </test_node> <test_node type="a"> <hoge> <hoge_child>hoge3</hoge_child> <hogehoge>hoge4</hogehoge> </hoge> </test_node> <test_node type="b"> <hoge>
Ruby XML Performance Shootout: Nokogiri vs LibXML vs Hpricot vs REXML
Ruby Weekly is a weekly newsletter covering the latest Ruby and Rails news. Disclaimer: Every time we've run a piece about benchmarking or performance numbers on Ruby Inside, a retraction or significant correction has come out shortly thereafter. Benchmarking is hard, ugly, and quite often wrong or biased. It is not useless, however, but if you depend on the results in any way, you should certainl
REXML とlibxml-ruby の解析速度を比較して Gruff で描画してみた - suer のブログ
Rubyの文字列の連結速度を測定してGruffで表示してみた - すえひろがりっっっっ! の使い回し。 REXML は pure ruby なので個人的に使う分には気軽に使えていいのですがびっくりするぐらい遅いので、システムには組み込めません。というのをグラフで表示してみた。 環境 ruby 1.8.7 (2009-06-12 patchlevel 174) [universal-darwin10.0] libxml-ruby (1.1.4) gruff (0.3.6) 実験コード <root> <child/> <child/> <child/> ... </root> みたいな単純な構造のXMLを REXML と libxml-ruby で解析します。 子要素の数を徐々に増やしてそれぞれにかかった時間をプロットしていきます。 require 'rubygems' require 'gr
XML処理 REXMLの使い方 - プログラムメモ
よく忘れるので。 こんなXMLを用意した場合の例。 <root> <a name="a1"> <b>bbb1</b> <b>bbb2</b> <b>bbb3</b> <c>ccc1</c> </a> <a> <b>bbb4</b> <b>bbb5</b> </a> <a name="a3" price="100"></a> </root> 必ずrequire require 'rexml/document' XML読み込み doc = REXML::Document.new(open("hoge.xml")) とりあえず全文dump puts doc #結果 <root> <a name='a1'> <b>bbb1</b> <b>bbb2</b> <b>bbb3</b> <c>ccc1</c> </a> <a> <b>bbb4</b> <b>bbb5</b> </a> <a name='a
スクレイピングのためのNokogiri利用メモ - それはそれ、これはこれ
スクレイピングのチュートリアルを書いてみた。 参考：http://nokogiri.rubyforge.org/nokogiri/Nokogiri.html まだまだたくさんのクラスやメソッドがあるが(読んでない)、HTMLのスクレイピングに限定すれば多分これくらいで十分。 2014-02-16追記 なんかたくさんブックマークされていることに気づいたので、サンプルコードのRuby1.9/2対応のアップデート。 Mechanize周りも修正。WWW::Mechanize → Mechanize 等 (0) 前提知識 Ruby、HTML、DOM、CSSセレクタまたはXPath (1) クラス構造の理解 Nokogiri::HTML::Document < Nokogiri::XML::Document < Nokogiri::XML::Node < Object Nokogiri::XML::
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://aoproj.web.fc2.com/xpath/XPath_cheatsheets_v2.pdf