いまさら findと xargsと parallelの便利さを主張してみる - ダイミテイ
hnwさん、細かいツッコミをいれます。生産性が上がるわけでもないので、あまりしらなくていいことですが。 コマンドを一度に起動する (find -exec +) $ find . -name \*~ -exec rm {} \; ただ、これだと100000ファイルがヒットした場合にrmコマンドが100000回実行されてしまうため、全部実行するまでに案外時間がかかる、なんてことがあります。 http://openlab.dino.co.jp/2008/02/20/133431188.html これを回避するために xargsを使うのもまっとうですが、最近の find には + というのがあります (SUSV3 で定義されていて、 MacOS Xでも GNUでも (多分) BSDでも使えます)。 find . -name \*~ -exec rm {} + これで、複数の引数つけて rmを呼んで
xargs を使ってカジュアルに並列処理 - たごもりすメモ
シェルからでも重い処理というのはちょこちょこあって、例えば超デカいログファイルを移動して圧縮したりというお仕事は世界中のあらゆる場所で毎日行われていたりする。コマンドラインからでも大量の圧縮済みログファイルをいっぺんに展開したい、とか。 あるディレクトリ以下に存在するたくさんのファイルを(圧縮済みのものを除いて)全部 bzip2 圧縮したい！と思ったら、とりあえずさくっと次のようにコマンドラインで叩けばいい。 $ find . -not -name '*.bz2' | xargs bzip2 これで、まあそんなに問題なく効率的にbzip2圧縮ができる。だがしかし。 最近は複数コアのCPUが普通に転がってるし、あまつさえHyperThreadingが有効になってたりしてOSから見える論理CPU数がハンパない。普通に8とかある。その一方で複数コアを使用してくれるコマンドというのはあんまりなくて
ターミナル上のコマンドで並列処理を行う - _J Blog
パフォーマンスや複数プロセスに関する検証したかった時に知ったのでメモ*1 yes | head -{全部で何度実行するか} | xargs -L {引数の個数(基本1でよいはず)} -P {同時プロセス数} {実行コマンド} たとえば、test.shを10個のプロセスを立ち上げて 並列に実行したいときは下記のようになる yes | head -10 | xargs -L 1 -P 10 sh test.sh *1:yes コマンドも初めて知りました・・・お恥ずかしい
コマンド:xargs: UNIX/Linuxの部屋
最終更新 2019-01-26 UNIX/Linux の xargs コマンドは、標準入力から受け取った文字列を、コマンドの引数として指定できるコマンドである。コマンドライン文字列が長すぎるエラーを回避に使用する。また、xargs の実装によっては並列実行して処理を高速化させることができる。
xargs - 知らないと損する大変便利なコマンド - Linux入門
Newest Top10 CPU情報を確認するには - 09/18 20:52 sysctl - Linuxカーネルのパラメータを設定する | Linuxチューニング - 09/18 18:27 LVM - Linux高機能ディスク管理ツール - 09/11 16:38 Linuxシェルでメール送信 一例 - 09/11 00:08 プロセスの名前からプロセスをkillするには？ - 09/06 02:16 scpによるホスト間のファイル転送 - 07/14 23:01 zip/unzip によるファイルの圧縮／解凍 - 07/14 22:20 netstatコマンド - ネットワーク情報確認 - 07/10 11:39 sarコマンド - CPU・ネットワーク・メモリ・ディスク情報確認 - 07/09 16:44 mpstatコマンド - CPUの利用状況確認 - 07/08 17:18
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
【bash】xargsを使って2つのリストをCROSS JOINする
