fluentでAuto ScalingインスタンスのログをS3に保存する : toda_k
弊社の一部検証環境では、AWSのスケジュールや負荷に応じてインスタンスを自動的に増減してくれる機能であるAuto Scalingを使用しています。これにより、必要なときに必要なだけ使えるというパブリッククラウドの特徴を簡単に活かすことができます。 ただし今回の検証で使用するには、ひとつ不都合がありました。スケールダウンするときにインスタンスを「電源ケーブルを引っこ抜くように」落としてしまうため、終了時にログをまとめて転送することができないのです。保存しておきたいログは常時ほかのサーバーや記憶領域に転送する必要があります。 このためのツールとして最近fluentを検証・導入しましたのでご紹介いたします。 fluentとは ログの転送・集約をするためのツールです。プラグインで機能を拡張できる点とログを構造化できる点がとても頼もしく見えます。こちらのブログおよびスライドに細かな紹介が載っていま
Fluentdは、オンプレミスでも、花を咲かすか - Guutaraの日記
Fluentd meetup in Japan on Zusaar いやぁ、もう、本当に面白かったイベントでした。 会場の運営様、司会者様、発表者様。。 そして、参加者様の質問や雰囲気含めて、自分にとっては、とても、興味深い経験でした。 折角なので、なにか、残そうと思うのですが、内容の事は、USTとスライドで十分ですよね。 じゃ、自分は、何を考えて、あそこに参加して、ここから、何をしようと考えたのかなどを書き留めておこうかと思います。 うらやましいのは、ノーガードの叩き合い Fluentd の発表時から、興味があったのは、確かです。 しかしなんといっても、@tagomoris さんと、@furuhashi さんの、Twitter を介しての丁々発止の実運用と開発者の叩き合い 共同開発でした。 あれだけ、あからさまに、開発の過程を晒しながら、作り上げて行く様は、本当は、羨ましかったですよねぇ
Treasure Data Blog • Enabling Facebook's Log Infrastructure with Fluentd
Tweet About This post shows how you can replace Scribe with Fluentd. What is Scribe? Facebook uses Scribe as its core log aggregation service.. The description of Github reads, “Scribe is a server for aggregating log data streamed in real time from a large number of servers.” A network of Scribe servers forms a directed graph. Each server is a node and directed edges represent lines of communicati
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Fluentd Plugins for CouchDB, Amazon SQS/SNS
