Ameba を支える画像配信システムとそれを支える Lsyncd の話 | CyberAgent Developers Blog
この記事は CyberAgent Developers Advent Calendar 2016 の 17 日目の記事になります。16日目は No_oLimits さんの MySQL5.7でMHAとmysqlfailover試した でした。 みなさん、はじめまして。16年新卒入社の桐井です。 技術本部というところで、 Ameba の基盤システムを中心にインフラ業務に関わっています。 腰がいたいです。渋谷近辺でオススメの整体があれば教えてください。 今回は、私の配属後のミッションの 1 つである、 Ameba を支える画像配信システムの stat100 の構成刷新について書いてみたいと思います。長いです。 よろしくお願いします。 Ameba を支える画像配信システム “stat100” アメブロやガールフレンド(仮) など、Ameba が提供するサービスやゲームで使われる画像配信システムのう
lsyncd 2.0.0 を導入してみる(CentOS 5.5) « sabonya@atlas
Linux Kernel 2.6.13 の inotify を検知して指定ディレクトリのファイルの更新があった際に自動的に rsync かけてくれる lsyncd. cron で rsync するより効率よさそげ、反応はやそげでいい感じなんですが、バージョンの差違がわりとはげしいかんじ。 yum でいれられる lsyncd は 1.0 なんですが、lsyncd 公式によると、stable として出されているのは、1.0, 1.25, 2.0.0 の3種類。 ・1.0 – Cent の yum でいれられる。複数ディレクトリの転送に対応していない。 ・1.25 – 複数ディレクトリの転送に対応したけど、設定ファイルが xml でうざー。 ・2.0.0 – 全面的に書き直して、設定ファイル等の制御を Lua で行うように修正。 とのことなので、2.0.0 に置き換えてみる。 参考U
lsyncdが勝手に止まってた - フタなしカンヅメ
この前設定したlsyncdですが、いつの間にか勝手に止まってました。なぜだろう？と思いログを見てみると下記のようなエラーで止まっていた。 rsync: failed to connect to 192.168.1.2: Connection refused (111) rsync error: error in socket IO (code 10) at clientserver.c(107) [sender=2.6.8] Sun Aug 9 04:02:11 2009: Forked binary process returned non-zero return code: 10 Sun Aug 9 04:02:11 2009: ERROR: Initial rsync from /home/www/vhosts/ to 192.168.1.2::www failed. どうやら転送先
lsyncd.conf.xmlは複数ホスト記述が可能 - UNIX的なアレ
lsyncd.conf.xmlを書き直していたのですが、ちょっと新しい発見があったのでメモ。 １つの監視対象のディレクトリを複数ホストに記述したい場合、以下のような書き方ができることを発見しました。設定ファイルがスッキリしてよかった。 <lsyncd version="1.25"> <settings> <logfile filename="/var/log/lsyncd"/> <binary filename="/usr/bin/rsync"/> </settings> <directory> <source path="/path/to/data/"/> <target path="host01::data"/> <target path="host02::data"/> </directory> </lsyncd> 関連リンク lsyncdで上限ファイル数を超えた時の対処策 - UN
Linuxでリアルタイムミラーリング « Fosters Technical Blog
日次バックアップとかファイルサーバには必要ないかと。 世代管理なんぞは必要ないかと。 フルバックアップとかテラ単位にもなると何日かかることやら・・・ それなんで、リアルタイムミラーリングを行って、 随時バックアップをすることに。 rsync+lsyncで行います。 ミラー先へのネットワークルートが死んでても開通した時点から 自動で差分コピーされるスグレモノ。 ※※ ミラー元とミラー先を間違えないように ※※ まずはミラー先の設定から行います。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
