大きなテキストファイルをawkで処理するときにcatで投げ込むのと、ファイル読み込みするのどっちが速いか比較 - カメニッキ
追記が増えたので整理 経緯 2.5GBのテキストファイルを加工する必要があり、①vimで開いて加工→vim死亡②sublime textで開いて加工→sublime text死亡となったため、awkを用いて以下の様なコマンドを実行した。 $ cat sample.txt | awk '$5 ~ /((26|27|28|29|30)\/Jun|(01|02|03)\/Jul)/{ print }' > result.txt すると 「catいらなくね？」と指摘 さらにMATSUMOTO, Ryosuke (@matsumotory) | Twitter ＜ 「キャッシュに入れて高速化してるんかと思った」 とコメントをもらいました。ので、どっちが速いかの検証です。 注意 加工の目的はログファイルからある期間だけの行を抜き取りたい 正規表現がいけてないのは気にしない 比較 awkにファイル指定す
Unixのcatコマンドのオプションuの機能はなんですか？オプションなしの場合との違いが具体的に表すことができるなら具体例をお願... - Yahoo!知恵袋
バッファリングを抑制するオプションですが、全ての処理速度が格段に向上しているので、Linuxではほとんど意味なしなオプションとなっています。いくつかのディストリビューションでは、そのオプション自体がないようですね。 UnixやUNIXの時代のレガシーオプションという事でしょう。 ＞具体例をお願いします。 cat は、指定されたファイルや入力装置からの標準入出力をじかに読み込みます。元々は、ファイルをマージする目的として作られたモノで、連続で大きなテキストファイルなどを読み込ませて、それを標準出力であるディスプレイに表示させた場合、その表示速度は、ディスプレイに置かれたターミナルの接続速度に制限されます。DISKやテープから読み込む速度が１０Mbpsでも、端末が300bpsなら300bpsで通信することと同じ速度しか出ません。 たとえば、10M byteのデータファイルを cat で読み込ん
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
