fabricで高速なファイル転送 - Qiita
追記: http://qiita.com/NPoi/items/46364461f0ab76e986c3 のやり方の方がスマートですね！ fabricのputは遅くないですか？rsyncを使っちゃいましょう。画像やHTML、JSなど静的なファイルがたくさんあるディレクトリをまるごと転送するようなケースではfabricの実行時間が劇的に違うテクニックですのでご紹介します。(fabricをある程度使ってる人を想定させていただいております) rootじゃないユーザでrsync これはfabricから公式機能で提供されてるので簡単に使っちゃえます。 from fabric.contrib.project import rsync_project @task def hoge(): rsync_project( local_dir='./mydir', remote_dir='/usr/local/
Fabric で rsync する - Memo
Python のデプロイツールである Fabric を普段から使っている。 で、Fabric で rsync をする場合は以下のように書く。 #!/usr/bin/env python # -*- coding: utf-8 -*- import os from fabric.api import env, run, roles, cd from fabric.contrib import project, console env.user = 'username' env.roledefs = { 'web': ['192.168.1.10', '192.168.1.11', '192.168.1.12'] } @roles('web') def rsync(): project_path = '/path/to/projects' dirname = os.path.dirname l
rsyncのちょっとイイ話
Kubernetesでの性能解析 ～なんとなく遅いからの脱却～（Kubernetes Meetup Tokyo #33 発表資料）NTT DATA Technology & Innovation
Rsync Algorithm « Python recipes « ActiveState Code
ActiveState Code (http://code.activestate.com/recipes/577518/) This is a pure Python implementation of the rsync algorithm. On my desktop (3.0GHz dual core, 7200RPM), best case throughput for target file hash generation and delta generation is around 2.9MB/s. Absolute worst case scenario (no blocks in common) throughput for delta generation is 200KB/s to 300KB/s on the same system. Tested in Pytho
lsyncdでリアルタイムrsync - maruko2 Note.
lsyncdでリアルタイムrsync 提供：maruko2 Note. 移動： 案内, 検索 Website http://code.google.com/p/lsyncd/ 同期元ディレクトリ内のファイルやディレクトリに更新があると、リアルタイムに同期先のディレクトリと同期する。 lsyncd は、ファイルシステムの更新をリアルタイムに監視し、更新があると rsync コマンドで同期する。 ファイルシステムの更新を監視する機能は、Linux カーネル 2.6.13 で導入された inotify を利用している。 lsyncd は、バージョン 1系 と 2系 で設定ファイルの記述方法が異なる。 バージョン1系は xml で記述。 バージョン2系は lua で記述。 Linux Kernel 2.6.13 で導入された inotify を利用しているため、Kernel 2.6.13 以上の
Rubyでディレクトリ・ミラーツール rbsync - それマグで！
よくやるファイルミラー処理をまとめたrubyクラスを作った rsync がアレコレ覚えること多くて気に入らない。Rubyでミラーツール作ってんだ。 サイトの更新作業や、デジカメのバックアップ、PC環境など、よくつかうパターンがある。コレに合わせrsync を考えたり漏れのないロジック考えるのが。毎回考えるのが面倒になってきた． さくっと出来るように。Rubyでクラス書きました． こんな悩みにオススメ ファイル同期のこんな悩みにオススメです． 上書きされた．ファイル消えた・・・ 送信先でファイル名が変わってて、ゴミファイルが増えた 送信先のファイルを別名にしてから、転送する 同じファイルが別名でいくつもある 更新日付の新しいモノだけを転送したい。 ファイルの中身をみて同期してほしい。 rbsyncで解決 ファイル名が変わっていても、同期する。 ファイル名が衝突したら，別名で転送する。 これだ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
