#fluentd 用ログ収集専用のエージェント fluent-agent-lite 書いた - たごもりすメモ

みんな大好きfluentdはたいへん便利ですが、ログの収集＆集約だけをしたい、というときにちょっとオーバースペック気味のところがあります。特に in_tail はログの読み込みと同時に parse をする仕組みになっており、まあログが書かれた場所ならparseのルールもわかってるでしょ、というところは合理的なものでもあるのですが、loadavgが高いサーバでそういうことをするのは正直にいってなかなか厳しいです。 そういうわけで以前に scribeline というエージェントツールを作ったのでこれを fluentd 以降後も使い続けていたのですが、ログをいったん集約するところの fluentd がCPU使用率的にいっぱいいっぱいになって厳しいものがありました。「scribe(Thrift)じゃなくてMessagePackにすれば倍くらいさばけるよ」ということを某開発者が言っていたような気もす

[tagomoris]

書いた

[tri-star]

fluentd-agent-liteについて

[editnuki]

一旦メモ

[tmatsuu]

素晴らしい。

[licht_x]

#fluentd 用ログ収集専用のエージェント fluent-agent-lite 書いた - tagomorisのメモ置き場

[wasai]

よさげなものが公開されてる

[poafag]

fluentd plugin 生ログ

[oranie]

いやっほう！

[hiroyukim]

つかおう(・∀・)

[riywo]

すんばらすぃ〜

[qphoney]

ありがたや、ありがたや