FastestCSV がヤクい件 - ´・ω・)＜ときどき書くよ
Ruby の標準添付CSV パーサが遅いというのは有名な話なので これまでは主にFasterCSV を使っていました。 FasterCSV のベンチマーク - *Trace Output* にあるとおり、標準のパーサと比較して 結果 csv を parse して行数を数えるだけのスクリプト（後述）の実行時間を GNU time で測定しました。 対象 結果 ruby 1.8.4 + 標準添付の csv 12分26秒56 ruby 1.8.4 + FasterCSV 0.1.9 2分34秒92 FasterCSV は標準添付の csv パーサの 5〜6 倍速いようです。 と、それなりに満足していたのですが、とあるPHP で書かれた「CSV を解析してほげほげする処理」を Ruby で書き直してみたところ、10倍以上の時間が掛かるようになってしまいました。 # 4万行↑のCSV のため、数十秒
添付ライブラリの CSV クラスで標準入力からデータを受け付けるようにする - elm200 の日記(旧はてなダイアリー)
趣旨 Ruby 標準添付ライブラリの CSVクラス は CSV ファイルの読み書きに便利である。ただ残念なことに標準入力からデータを受け付けてくれない。UNIX のフィルタ的コマンドを作ろうというときには、不便だ。 そこで、標準入力からデータを受け付けるようなパッチを書いてみた。 パッチ コードは以下のとおり。 require 'csv' class CSV def self.open_reader(path, mode, fs, rs, &block) file = path == '-' ? STDIN : File.open(path, mode) if block begin CSV::Reader.parse(file, fs, rs) do |row| yield(row) end ensure file.close end nil else reader = CSV::Rea
LightCsv
LightCsv CSV パーサ 作者 とみたまさひろ <tommy@tmtm.org> ライセンス Ruby ライセンス http://www.ruby-lang.org/ja/LICENSE.txt と同等。 機能 CSV をパースして配列を返す。 ダウンロード http://tmtm.org/downloads/ruby/lightcsv/ インストール $ make $ make test # make install CSVのパース 各レコードはカラムを要素とする配列である。 レコードの区切りは LF,CR,CRLF のいずれか。 以下が csv.rb と異なる。 空行は [nil] ではなく [] になる。 「"」で括られていない空カラムは nil ではなく "" になる。 使用例 CSVファイルのレコード毎にブロックを繰り返す。 LightCsv.foreach(filena
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://devlog.moonwolf.com/20070920.html
O'Reilly Media - Technology and Business Training
