タグ

関連タグで絞り込む (0)

  • 関連タグはありません

タグの絞り込みを解除

kafkaとfluentdに関するtackeのブックマーク (1)

  • Kafka Consumer for Fluentd - Qiita

    treasure-data/kafka-fluentd-consumer Kafkaからデータを取り出してFluentdに転送するJava実装のKafka Consumerを書きました.基的なことはREADMEに書いてるんですが,一応日語でも書いておきます. 背景 1トピック1パーティションであれば,すでに公開されているfluent-plugin-kafkaが使えます.ですが,複数トピックだったりをConsumer Groupを使って処理しようとすると,現状fluent-plugin-kafkaが依存しているPoseidonに機能がたりないという問題があります(output側は問題ありません). 海外だとデータ量が多い会社も多く,それに伴いKafkaを使っている会社が少しずつ増えてます.その影響もあり,FluentdとKafkaを連携させたいという要望がちょくちょく出てきたので,Jav

    Kafka Consumer for Fluentd - Qiita
  • 1