統計屋のためのAWK入門 - あんちべ！

はじめに 本稿はAWKという言語を用いて、 ごく簡単にデータ分析用の前処理*1をするための解説記事です。 AWKは短いコマンドを記述するだけで多様なデータ処理を可能にします。 特にデータの抽出に関して恐るべき簡易さを提供します。 具体的には、input.txtというファイルの中から "fail"という文字列を含む行を抽出したければ次のように書くだけです。 awk /fail/ input.txt つまり、スラッシュ記号で文字列を指定するだけで その文字列を含む行を抽出できるのです。 大変簡単ですね！ また、awkはLinuxやMacには標準で入っており、 Windowsでもawk.exeを一つ用意するだけなので、 面倒なインストール作業や環境構築は不要で誰でも即座に使えるため、 自分で書いた処理を他人に渡したり*2各サーバに仕込むなども簡単に出来ます。 複雑な処理をする場合はPythonや

[yto]

ワンライナーは全部Perlで済ませているなあ。

[yhira0202]

Windowsにもawkを入れといてくれれば、楽なんだけどなぁ。

[k2wanko]

awkって色々できるのか　空白区切りの文字の任意の文字を取得するためにしか使ってなかったな

[suireN]

windowsでawkを使う

[U1and0]

AWKは短いコマンドを記述するだけで多様なデータ処理を可能にします。Windowsでもawk.exeを一つ用意するだけなので、 面倒なインストール作業や環境構築は不要で誰でも即座に使える。複雑な処理をする場合はPythonやRubyなど

[hoxo_m]

この記事に助けられた日だった。

[hiddy216]

なるほど便利

[totttte]

awkで標準偏差とかできるんだ…しらなかった

[shindoiwa00]

awk大好き

[tak4hir0]

統計屋のためのAWK入門 - あんちべ！

[Rocco]

最後の一行野郎が秀逸! RT 統計屋のためのAWK入門 - あんちべ！

[ryuichiueda]

ああああ次の本に書いたのとちょっと内容がかぶっている・・・。リファレンスにURLを書きます。

[nyangry]

データ処理　解析

[richard_raw]

ΔE94の色差計算をAWKのワンライナーで書いたことがあるので親近感ががが。/そういえばあんまりgsub使ったことないや。

[hatakazu93]

技術,awk

[papiro]

データ処理にawk再入門

[ot2sy39]

“面白い範囲指定として/start/, /end/という方法があります” これ頭から抜けてるとき多い。

[mobanama]

"感想。 統計処理1ライナーで書くなアホか見辛い"

[REV]

むかーし、コツコツ入れた日本語変換のユーザー辞書をこれで移行した。今は、GoogleIMEで出ないこと少ないしな / Webで発表された統計を2chに整形してアップする職人になる為には勉強する必要ありか

[yja_ki]

仕事で使うのでメモメモ

[tokida]

統計屋のためのAWK入門 - | 本稿はAWKという言語を用いて、 ごく簡単にデータ分析用の前処理*1をするための解説記事です。

[alaluta]

Miyaji, Yutaka

[decoy2004]

awk ワンライナーで相関係数、ピアソンの積率相関係数など。

[yoppu7]

良い記事。

[K2ICE]

シェル芸の誘いかな

[antirosh]

windows版があるのかっ！

[wbfcg593]

IT プログラミング

[remcat]

「1ライナーで書くなアホか。」 / jgawk の Win32 版ってどうなってるの? / 欠損値が空文字とか空白だと、$n 変数がひどいことになるので注意 / → http://htn.to/GZdGkF

[dolmen777]

億劫なテキスト編集にawk

[midnightseminar]

そういえば前、勉強会で紹介してる人がいた記憶がある

[misatad]

awk は偉大！高校くらいで教えるべき