研究, データ最近、2GBとかくらいの固定長データをcsvにしてみんなに渡さないといけない、という事態がちょいちょい発生しますのでそのメモ。 ぶっちゃけ、RだろうがStataだろうがなんでも固定長データの読み込みはできますが、いかんせん遅い!のでまずはスクリプト言語でサクッと変換しちゃおう!というのが目論見です。 さて、そうなるとpythonかperlか、その辺かな?というわけですが、今回はgawkというやつを使いたいと思います。このなかのFIELDWIDTHS というものがいいようです。 まずは、ここからダウンロード。一番新しいやつの.tar.gzでいいのではないでしょうか。そして展開しておいてください。ちなみに、Mac向け。XcodeとCommand line toolは事前にダウンロードしておいてください。 cd gawk-3.1.1 ./configure make sudo ma