シェルスクリプトの中で1行ずつ変数を分割する際には、cutとかawkとか余計なプロセスを起動せずsetを使って分割した方が効率的 - 双六工場日誌
シェルスクリプトの中で、スペース区切りもしくはタブ区切りのレコードを扱うことがよくあると思います。 たとえば、前回のエントリ「AWS CLIとjqを使って、AWSのELBボリュームがアタッチされているEC2インスタンス名を出力するワンライナーを書いた - 双六工場日誌」のスクリプトの出力は以下のようになります。 i-ec56a9f5 vol-07d00601 servername i-ec56a9f5 vol-8f550991 servername このようなレコードの特定の列を取り出して、処理する際にどうするのが効率的か、というのがこのエントリのお題です。 非常に古い話題なので、昔からシェルスクリプトを書いている人には自明な話ではありますが、最近、シェルの標準機能の話を聞く機会がなく、失われつつある技術になってきている気がしているので、改めて確認ということで。 例として挙げたレコードから
Glances - An Advanced Real Time System Monitoring Tool for Linux
Glances – An Advanced Real Time System Monitoring Tool for Linux Earlier, we’ve written about many Linux System Monitor Tools that can be used to monitor the performance of Linux systems, but we think that most users prefer the default one that comes with every Linux distribution i.e. top command (real-time monitoring of system processes). The top command is the real-time task manager in Linux and
Linuxパッケージのインストール時に出る承諾画面を飛ばす方法 - 面白コンテンツ探求日記
シェルスクリプトとかを使ったバッチ処理でパッケージのインストールをしていると、ポストインストール画面でライセンス承諾を求められると処理が止まってしまう。 yumやaptで-yオプションを付けてY/n 入力を飛ばすように、このような承諾入力もパスするやり方をしらべてみた。 手順 今回試した環境はUbuntu12.04。 まずDEBIAN_FRONTEND という名前で環境変数をセットする。 # export DEBIAN_FRONTEND=noninteractive 変数をセットした状態で承諾画面の出るパッケージをインストールしてみる。 # apt-get install -y oracle-java7-installer .... oracle-license-v1-1 license could not be presented try 'dpkg-reconfigure debcon
zshのalias -s (suffix alias)が神な件 - プログラムモグモグ
まず, 他のシェルをお使いの人にはごめんなさい. aliasコマンドの-sが使えるのは zsh 4.2.x- で, 他のシェルでは実装されていないと思います. あと, もう既に alias -s 知ってるよーって人は読まなくていいです. alias -s って何？ 打ったコマンドの後ろ(suffix)を見て, 適当に宜しくやってくれるやつです. 次の例を見て下さい. ~$ echo "print ('hello, world')" > hello.py ~$ python hello.py hello, world ~$ alias -s py=python py=python ~$ ./hello.py hello, world ~$ Pythonのコードは python hello.py で実行出来ますが, お尻が py なら python を使います, とaliasしておけば, ./
DLNAサーバーを試す[MediaTomb]編 – トラスコ時にシークバーを表示する | デジ備忘
mediatombで、トランスコードを有効にして動画を視聴するとREGZAにシークバーが表示されず、早送りや巻き戻しができません。 プログラムソースを確認してみましたが、mediatombのトランスコードを有効にするとシーク(早送りや巻き戻し)やポーズ(一時停止)を出来なくしているようです。 以下は、”MP4″(AVC/AAC)の動画を、”MPEG2″にトランスコードしながらREGZAから視聴しています。REGZA Z9000では右下にシークバーが表示されますが、トランスコードを有効にして動画を視聴すると、シークバーが表示されません。 Wiresharkで、REGZAとmediatombの通信パケットを監視してみました。 以下は、REGZAからのリクエストにmediatombが応答したXMLの情報です。 {code} <s:Envelope xmlns:s=”http://schemas.
MediatombをビエラのDLNAサーバとして使う（その８）
(前回) MediatombをビエラのDLNAサーバとして使った場合、直接ファイルを再生する(バイト・レンジ・シークを使う)と早送りや一時停止で映像に復帰できない(ビエラ側の)バグがあることは前回に説明しました。 そこで、Mediatomb側にパッチを当てることでタイム・ベース・シークを可能にし、Mediatomb側からはトランスコードで映像を送信することで対応できることがわかりました。私は既に対応して半年以上ですが快適に使用できています。 まず、ここから Add time-based seek capability to transcoded streams というパッチをダウンロードしてMediatombに適用します。 次に、トランスコードの設定ですが、いろいろ細かいのと各自のやり方があるので方法は任せます。 ただし、標準の引数 %in %out の2つに加えて %seconds が追
DLNAサーバーを試す[MediaTomb]編 – REGZAからMPEG2動画を視聴する | デジ備忘
前回、MediaTombがREGZAから認識できたので、実際に視聴できるか試してみました。今回試したのは、REGZA Z9000が再生できるMPEG2動画で、MediaTombのトランスコードは停止しています。 MPEG2を視聴できるようにする方法は、コメントで頂いているのでその辺を踏まえてテストしています。 インストール直後は以下のように、コンテンツ管理画面が表示できないので設定ファイルを変更します。MediaTombの設定ファイルは”/etc/mediatomb/config.xml”になります。 管理画面を有効にするには”ui”を”enabled=yes”に変更します。 {code} <ui enabled=”yes” show-tooltips=”yes”> <accounts enabled=”yes” session-timeout=”30″> <account user=”m
NetworkConfiguration - Debian Wiki
Reader Prerequisites: To get the most from this article, understand the following concepts before reading: basic unix command line tools, text editors, DNS, TCP/IP, DHCP, netmask, gateway 3 ways to configure the network The interfaces configuration file at /etc/network/interfaces (this page): for basic or simple configurations (e.g. workstation) NetworkManager: This is the default for Laptop confi
GitHub - facebookarchive/flashcache: A general purpose, write-back block cache for Linux.
------------------- This project is not actively maintained. Proceed at your own risk!_** ------------------- License : Everything in flashcache components released under GPL v2. Update : Added the flashcache-wt directory, which contains a (separate) module for a write through flashcache. For more details, look at flashcache-wt/README. Building Flashcache : ------------------- Update : Vadim Tkach
BackTrack - Wikipedia
BackTrack Linux（バックトラックリナックス）は、ペネトレーションテスト目的に特化した1DVD型のLinuxディストリビューションの一つである。 歴史[編集] BackTrack Linuxの歴史は、Whoppix（Whitehat knoppix）まで遡る。 Whoppix[編集] KNOPPIX派生版[編集] KNOPPIX 系統樹 WhoppixはKNOPPIX派生1CD Linuxである。Red HatをもじったBlack Hat、さらにそれらをもじったWhite Hatを冠していることから判るように、WhoppixはWhiteサイドのセキュリティ関連、つまりはペネトレーションテスト目的の1CD Linuxであり、同分野の中ではかなり古い部類に入る。日本ではハッカージャパン[1]などのようにコンピュータ雑誌にも取り上げられており、この分野ではよく知られるものである。 S
複数のサーバから一斉にファイルを収集するのにpslurpが便利 - Glide Note
以前、ブログに書いて以来、活用しているpsshとpscpなんですが、 付属コマンドのpslurpについてはすっかり忘れて全く利用していなかったんですが、 同僚の刺身さんが結構活用しているというのを聞いて、改めて使ってみると大変便利！ Parallel sshで複数のホストへ同時にコマンドを実行する | Glide Note - グライドノート 環境はSL6.1です。 pslurpの使いどころ 複数のサーバからaccess.logなどのログ、my.cnfといった設定ファイルなどの同名ファイルを持ってくる場合 DNSラウンドロビンや、ロードバランサを利用していてアクセスログが分散している場合 通常何も考えずscpとかで持ってくるとファイルが上書きされてしまうので、 ホスト毎にファイルを分けて管理したい場合にpslurpが活躍します。 pipを利用してpsshの導入 2012年なんでeasy_i
tarコマンドを負荷制御（bwlimit指定）して実行する方法
cstream - direct data streams, with bandwidth limiting, FIFO, audio, duplication and extended reporting support. ざっくり言うとデータストリームの制御とかできるよ！っていうコマンドっぽいです。オーディオアプリケーションのデータレートのエミュレーションとかで利用されているそうです。オプションではcstreamコマンドの-tを使うのですが、以下がmanでの内容になります。 -t num Limit the throughput of the data stream to num bytes/second. Limiting is done at the input side, you can rely on cstream not accepting more than thi
Dropbox のスケールとか
Python なサービス みんな大好き Dropbox のスケールとかメモ。以下のページ辺りからピックアップ。Parted? みたいなので、続編がでたら追記するかも。 Scaling lessons learned at Dropbox, part 1 (comment) Dropbox - Startup Lessons Learned (slideshare) Dropbox -Yコンビネーターが生んだスタートアップの軌跡と未来 - スケール関係ないですが、2006 年当時はオンラインストレージサービスがいっぱいあったようで、VC から資金調達したときのやり取りがおもしろい VC "クラウドストレージサービスなんて腐るほどある" Drew "なにか使ってるのありますか？" VC "NO" Drew "..." 完璧で、スケーラブルで、クロスプラットフォームなクラウドストレージ！当時、プ
うるう秒のあとにMySQLなどのCPU使用率が高騰する件について - SH2の日記
2012年7月1日のうるう秒のあとに、MySQLやJavaなどのCPU使用率が高騰する事象が報告されています。 CPU %user %nice %system %iowait %steal %idle 08時30分01秒 all 0.02 0.00 0.02 0.04 0.00 99.91 08時40分01秒 all 0.02 0.00 0.02 0.08 0.00 99.88 08時50分01秒 all 0.02 0.00 0.02 0.03 0.00 99.92 09時00分01秒 all 0.11 0.00 0.13 0.04 0.00 99.72 09時10分01秒 all 23.02 0.00 29.09 0.11 0.00 47.78 09時20分01秒 all 23.11 0.00 29.08 0.06 0.00 47.75 09時30分01秒 all 22.85 0.00
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Installing Chrome Java Plugin
How to get espeak working?
How to speed up package updates using apt-fast (Debian & Ubuntu)
GitHub - ilikenwf/apt-fast: apt-fast: A shellscript wrapper for apt that speeds up downloading of packages.
Activities Configurator - GNOME Shell Extensions
Savannah Git Hosting - coreutils.git/commit