タグ

td-agentに関するa2ikmのブックマーク (8)

  • Fluentd v0.12 is Released | Fluentd

    We are pleased to announce that we have released Fluentd v0.12 today. v0.12 introduces nice features and improves internal structures (in anticipation for v1). RubyGems: fluentd 0.12.0 New Features Configuration --use-v1-config is used by default, which means that the user can use JSON arrays/hashes and embedded Ruby code natively. See the docs for further details. In addition, we introduced the @

  • Treasure Agent 2.2.0のリリース - Qiita

    すでにアナウンス済みですが,Treasure Agent(td-agent) 2.2.0を出しました td-agent 2.2.0 - Google Groups パッケージ内の更新は以下の通りです. fluentd v0.12.7 fluent-plugin-s3 v0.5.7 fluent-plugin-mongo v0.7.8 td v0.11.8.2 fluentd-ui v0.3.18 ruby 2.1.5 json 1.8.2 cool.io 1.3.0 Amazon Linux support fluentd v0.12 このバージョンから,fluentdがv0.10ではなくv0.12系が使われるようになりました.その結果,Filter/Label,forwardプラグインでのat-least-onceなどが使えるようになります. これらの機能に関しては,v0.12のリリース

    Treasure Agent 2.2.0のリリース - Qiita
    a2ikm
    a2ikm 2015/04/07
    Amazon Linuxのサポートありがたい
  • td-agent v1 vs. td-agent v2 | Fluentd

    Features Major feature updates to td-agent v2 are as follows. Ruby 2.1 Updated for the core libraries, msgpack, Cool.io, etc. Changed the installation directory from /usr/{lib,lib64}/fluent to /opt/td-agent td-agent-gem utility command was added To install a third-party plugin, use /usr/sbin/td-agent-gem command This utility was introduced to resolve the issues around rvm. Uses Fluentd v1 configur

  • td-agent2をAmazon Linuxで独自ビルドする | DevelopersIO

    ども、大瀧です。 皆さん、Treasure Data Serviceやfluentdを活用するためのクライアント・エージェントであるTreasure Agent(通称td-agent)を活用してますか?AWS環境でも、Amazon KinesisやAmazon DynamoDBとの連携などビッグデータに関わる処理では欠かせないツールになりつつあります。 ただ、Treasure Data社公式のtd-agentパッケージはサポートOSにAmazon Linuxが含まれておらず、独自にビルドして使用することが推奨されています。そこでエントリーでは、その独自ビルドを検証した結果をシェアしたいと思います。Amazon Linuxでのサポートについて、詳しくは以下のQiitaエントリーを参照してください。 td-agent - Treasure AgentとAmazon Linux - Qiita

    td-agent2をAmazon Linuxで独自ビルドする | DevelopersIO
  • fluentd の timezone バグにはまった(v0.10.45) - Qiita

    fluentd のバグにはまった fluentd 最新版 2014/06/19: version v1.1.20 をインストール(自動だと)すると、fluentd v0.10.50 がインストールされるのだけど、このバージョンでは timezone がうまく処理されないバグがあるようです。 具体的には、timezone の処理がバグっているため type file で出力すると下記の様になる。JST(+0900) 以外も同様の現象がでてるんじゃないかな?

    fluentd の timezone バグにはまった(v0.10.45) - Qiita
    a2ikm
    a2ikm 2015/01/16
    td-agent 1.1.21-0 (fluentd 0.10.55)では直ってた
  • Treasure Agent(td-agent)の1と2の今後 - Qiita

    Treasure Dataが提供しているFluentdの配布パッケージであるtd-agentの今後について書く.この記事は http://docs.fluentd.org/articles/td-agent-v1-vs-v2 http://docs.treasure-data.com/articles/td-agent2 とかMLでのアナウンスを日語でまとめたような感じの記事です. 現在は1と2の二つのバージョンが並行してリリースされているので,まずそれぞれの違いについて書きます. td-agent 1 今までのメインバージョンであり,現在はold stable.同梱ライブラリの大きなバージョンアップはありません.最新版の1.1.21では以下のものが同梱されています Ruby 1.9.3 jemallocやmsgpackなど,コアライブラリ群 Fluentdとよく使われるプラグイン群 サ

    Treasure Agent(td-agent)の1と2の今後 - Qiita
  • td-agent のログレベルを設定する

    設定ファイルのデバッグのために一時的に td-agent のログレベルを詳細にしたい。 fluentd(td-agent)使ってサーバ間でjsonログを転送してみる&詳細ログも出してみるテスト - ためしにやってみる系 こちらによると、/etc/init.d/td-agent を直接編集するという方法が公式サイトで説明されているという。探してみてもその記述は見つけられなかったけれど、一時的に書き換えるだけなら手っ取り早いので、この方法でいくことにした。 バージョンによって場所は違うが、/etc/init.d/td-agent 内の、次のようなスクリプトの実行コマンドを定義しているところに TD_AGENT_ARGS="${TD_AGENT_ARGS-/usr/sbin/td-agent --group td-agent --log /var/log/td-agent/td-agent.lo

    td-agent のログレベルを設定する
  • #fluentd fluentd(td-agent)構築時に気をつけるポイントについて[2012/3/26 追記あり] - oranie's blog

    結構既出な内容ですが、思いっきりハマったので改めて。 ●fluentd→fluentdの通信時にfowardを使おうとしたらエラーになる。 ※追記 VMwareの場合はこっちを参考に。fluentdじゃなくてVMwareの問題というパターンもあり。 http://d.hatena.ne.jp/oranie/20121107/1352298768 中間fluentdから最終的に集約するfluentdにfowardでログを送ろうとすると、始めはちゃんと送れるのに、ちょっとするとログにエラーが出ていた。もちろん集約先の方ではログ受信出来なくなっている。 failed to flush the buffer, retrying. error="no nodes are available" もっと具体的にはこんなの。 で、理由は @oranie 死活監視にUDPのほう使うらしいのでそっちも通さない

    a2ikm
    a2ikm 2014/03/24
    死活監視にUDPも使うので、TCPだけでなくそっちも通してあげる
  • 1