高速に並列処理: xargs -P vs parallel -j vs split -n r/ - いちいの日記
最近になって、 GNU Coreutils の split(1) に --filter ってオプションがあり、入力を並列処理する方法の1つになることを知りました*1。 並列処理をしたいときに使うものとして GNU Findutils の xargs(1) -P, --max-procs (おそらく GNU 拡張) と、そのままの GNU parallel があります。サーバ管理で並列にログインしてなんかやる系だともっと多くのバリエーションが有るでしょうが、 synax sugar の域を超えないのでここでは考えません。 尤も split も本来の目的がちょっと違うので同じように比較するのはおかしいんですが、思ったより効率が良いようなので試してみました。 環境は SunOS, Xeon E5-2630 v3 @ 2.40GHz の 2 socket で 32 threads というとこです。
moreutils: the utilities package every UNIX/Linux/Mac OS developer should know - Clean Coding
moreutils: the utilities package every UNIX/Linux/Mac OS developer should know Most UNIX professionals know about the GNU core utilities, from the “used-everyday” ls, cp, ln, rm, touch, tail, wc, etc., to the “not-so-used” shell commands such as tsort, tac, factor, or seq. Among the UNIX utilities available, there is one package that includes some awesome utilities that makes our life’s a lot easi
シェル芸力向上のため moreutils を一通り試してみた - Qiita
$ rpm -qi moreutils Name : moreutils Version : 0.49 Release : 2.el7 Architecture: x86_64 Install Date: Fri 29 May 2015 06:34:50 PM JST Group : Applications/System Size : 155340 License : GPLv2 Signature : RSA/SHA256, Tue 04 Mar 2014 12:35:02 PM JST, Key ID 6a2faea2352c64e5 Source RPM : moreutils-0.49-2.el7.src.rpm Build Date : Wed 26 Feb 2014 07:58:44 PM JST Build Host : buildvm-21.phx2.fedoraproj
coreutilsに何が入っているのか - (ヽ´ω`)
いいコマンドがないか調べ物をしていると、それXXがあるよいわれ、更にそこからたどっていくとcoreutilsに入っていたというパターンにやたら遭遇するのでcoreutilsに何が入っているかを確認してみました。環境はUbuntuの14.04です。apt-get source coreutilsでソースがDLできたので 「ls man/*.x | wc -l」で１０４個ありました。確認してみたところ、普段よく見るコマンドは40個ぐらいでした。 cat - concatenate files and print on the standard output chgrp - change group ownership chmod - change file mode bits chown - change file owner and group cp - copy files and dir
Coreutilsの解説本「解説CoreUtils」 | ソフトアンテナ
GNU Core Utilities(Coreutils)とは「UNIX系のOSに必要とされるcat、ls、rmなどの中心的（core）なユーティリティ群のパッケージ、ないし、その開発とメンテナンスを行うGNUプロジェクト」(Wikipediaより)。LinuxディストリビューションではLinuxカーネル本体と組合せOSの核となる部分を司る重要なソフトウェア群として位置づけられています。 このCoreutilsを解説した同人本「解説CoreUtils」の原稿が公開されています。cat、tac、od、base64、fmt、numfmt、pr、fold、head、tail、split、csplit、wc、sum、cksum、md5sum…などなどリストアップできないほど大量のコマンドに関して、コマンドの使い方やオプションなどが丁寧に解説されています。 コマンドをパイプやリダイレクトで接続して様
RHL7/CentOS7の時代なのでcoreutils 8.22まで追いかけてみた - Qiita
はじめに <余談> 2017年末現在、Amazon Linux 2 LTS Candidate AMI 2017.12.0、並びに Amazon Linux AMI 2017.09.1 は coreutils 8.22です。まだまだいける。</余談> 2014年はついにRHLやCentOSが7系に移りました。古い環境が CentOS 6.x だったもので、いろいろ変わっていて戸惑うところです。ホットなのは systemd とか mariaDB とか OpenLMI とか net-tools 周りでしょうか。 ここではあまり注目されていない気がする、 coreutils のリリースノートを読んだメモを公開します。翻訳ではありません。メモです。 なお、私はSELinuxやSMACK周りは改めて勉強中の身なので、そこら辺の改善点については特に触れません。dd とかファイルシステムとの連携周りも改
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
EricLagerg/go-coreutils · GitHub - A cross-platform port of GNU's coreutils to Go
Xfennec/cv · GitHub - Linux tool to show progress for cp, rm, dd, ...