rsyncのlink-destオプションは便利そうだ – OpenGroove
今まであまり知らなかったrsyncコマンドだが、オプションを使いこなすと様々な応用ができそうだ。とりわけあまりメジャーではなさそうなオプション、--link-destは差分バックアップに使えるので覚えておきたい。 このオプションを使用すると、比較対象とコピー先を比べて差分のみをコピーし、変更がないファイルに関してはハードリンクとする。変更がないファイルはすべてハードリンクなのだから、資源の節約にはなる。 しかし自分はこの仕組みを理解するのに、結構手間取った。自信はないがまとめてみよう。まず、以下のコマンドが実行されていることが前提。/org_dir/ディレクトリを/old_dir/ディレクトリにコピーしている。 # rsync -av --delete /org_dir/ /old_dir/ 次に以下コマンドを実行してみる。/org_dir/を/backup/ディレクトリにコピーする。しか
Hadoopチューニング – MapReduceの投機的実行抑止 – OpenGroove
馬本 7.1.5 (P313)に、「HBaseに対してMapReduceを実行する場合は、投機的実行を無効にすることを強くお勧めします。投機的実行を使えば、同じリージョン及びサーバーに対してさらなる負荷をかけるだけであり、ローカリティの面でもよくないのです」…という記述がある。 「投機的実行」という表現が抽象的で分かりにくい気がしたが、一応一般的なコンピュータ用語であることを、さっき知った。 Speculative execution Speculative execution an optimization technique where a computer system performs some task that may not be actually needed. The main idea is to do work before it is known whether t
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
