Clojure clojure.data.csv の使い方 - Qiita
(ns clj-data.csv) (require '[clojure.data.csv :as csv]) (let [filename "usa-states.csv" csv (slurp filename) rows (csv/read-csv csv)] rows) (let [filename "usa-states.csv" csv (slurp filename) rows (csv/read-csv csv)] (doseq [row rows] (let [code (first row) name (second row)] (println (str code " => " name))))) (let [filename "test.ltsv" csv (slurp filename) rows (csv/read-csv csv :separator \tab
Clojureで巨大なZIPファイル/CSVファイルを処理した話 - Uzabase for Engineers
SaaS Product Team(以下Product Team)のあやぴーです。 Product Teamの開発しているプロダクトでは「企業に関する大量データ」というものを扱う機会があります。特に様々な形式でデータパートナーから受領するため、一筋縄でいかないことが多々あります。今回はその中でも巨大なZIPファイルの中に大量のCSV(ライクな)ファイルをClojureでいい感じに処理するために苦戦した話を書いていこうと思います。 前提 最初のアプローチ OutOfMemoryErrorとの闘い 実行時間との闘い CSVの読み込み リフレクションの抑制 まとめ 前提 まずはZIPファイルについて説明します。 毎月新しいファイルが100程度配信されている ZIPファイルは大きいもので2GB、小さいもので1MB程度 ZIPファイルの中には大量のCSV形式(区切り文字は|)のテキストファイルが含ま
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - markus-wa/cq: Clojure Query: A Command-line Data Processor for JSON, YAML, EDN, XML and more
Read csv into a list in clojure
using clojure-csv.core to parse a huge csv file
