巨大なファイル(100万行とかでも)を1行1行処理するrubyスクリプトのテンプレートを作った - Qiita

私が巨大ファイルを作るときにテンプレートをコピーして使います。 メリット いちいちCSVやファイルの読み書きをするときにコマンドを調べなくていい プログレスが出る 大抵巨大ファイルを読む場合10分くらいかかるけど、進捗が見えなくて進んでるかわからないため表示 スクリプトテンプレート 以下のスクリプトはCSVを読む場合のスクリプトです テキストファイルをいじる場合はこちら 1行1行の逐次処理でなく全行見たあとに集計処理をとかをやりたい場合はこちら require "csv" $is_debug = true def main(csv) #, output_file) # output_file_writer = CSV.open(output_file, "w") # output_cols = ["hoge"] # output_file_writer.puts(output_cols)