fluent-plugin-s3 でログを日付毎のディレクトリに置きたい場合にやること | iret.media
手短に…かっぱ（@inokara) です。 やりたいこと やりたいこと… fluent-plugin-s3 を使っていてバケット以下でディレクトリを作って更にその配下に日付毎のログを保存したい 以下のような感じでログを保存したいと思います。 ${BUCKET}/logs/YYYYMMDD/YYYYMMDD-H.gz さて、どうするか 必要なもの Amazon S3 fluent-plugin-s3 fluent-plugin-s3 のインストール方法とか割愛。 td-agent.conf 以下のように書きました。 type s3 aws_key_id AKxxxxxxxxxxxxxxxxxxxxxxx aws_sec_key xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx s3_bucket ${BUCKET} s3_endpoint s3-ap-northea
AWS 白帯シリーズ(14) fluent-plugin-cloudwatch-logs を使って CloudWatch Logs にログを送ってみる | iret.media
cloudpack の 自称 Sensu芸人 の かっぱこと 川原 洋平（@inokara）です。 追記（2014/07/24） export AWS_REGION=us-east-1 が引き継がれず service コマンドから td-agent が起動出来なくなる件ですが、@repeatedly さんにご指摘頂き /etc/sysconfig/td-agent に export AWS_REGION=us-east-1 を追加することで service コマンドにて td-agent の起動、再起動が出来ることを確認しております。 @repeatedly さん、有難うございました！ はじめに 先週、各インスタンスのログを CloudWatch に収集することが出来る CloudWatch Logs というサービスがリリースされました。CloudWatch Logs に関する情報は下記を
cloudpackブログ - sumologicってなんじゃ？（sumologic fluent pluginをつくってみた）
ログ解析システムにもいろいろなものがあるようですが、今回はsumologicを試してみました。 sumologicはサービス型のログ解析システムです。 このサービスについて、また、ログ解析システムが何故必要とされているかは、以下AWS荒木さんのスライドが わかりやすいです。 今までと同じようにfluentdでデータを入れ込みたいのですが、Sumologic用のPluginはないようです。 そこで、ログ収集基盤としてfluentdで統一させたい場合もあるので、今回はSumologic用のプラグインも 作ってみます。 ○Sumologicへの登録と設定 まず、会員登録して、ログインします。 「Get Started Now」をクリックします。 次にCollectorを追加します。 Collectorはログ収集コンポーネントです。 Collectorにはログがあるサーバー側にモジュールをインスト
cloudpackブログ - td-agent(fluent)のアップデート
今回は、gemsのパッケージも含めたアップデートを取り上げます。 前提として、以前紹介した記事「CentOS6にFluentdをインストール」を参考にtd-agent(fluent)が インストールされていることとして進めていきます。 まずは、yumによるパッケージのアップデートになります。 yum -y update td-agent ... 次に、gem updateで必要なパッケージをyumでインストールします。 yum -y install make gcc libxml2-devel libxslt-devel ... 最後に、gem updateします。 /usr/lib64/fluent/ruby/bin/gem update ... さらに、「Python版コマンドラインツールを初回起動時に自動アップデート」で紹介したように初回起動時に 自動アップデートするよう設定します。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
