タグ

fluentdに関するbraitomのブックマーク (4)

  • 大規模システムにおける5つのログ転送パターン

    成功者がどのようにNew Relicを使用してKubernetesのパフォーマンスを4倍に向上させ、拡張性とスループットを改善したかをご覧ください。

    大規模システムにおける5つのログ転送パターン
    braitom
    braitom 2020/05/19
    大規模なシステムでlog forwarderを使用してログを転送するときのパターンについて。5つのパターンが紹介されていてそれぞれの利点、欠点、設定例がまとめられている。
  • Fluentd 入門 〜運用に必要な基礎知識〜

    最近業務で Fluentd を触ることが出てきて入門したんですが、最初のうちはトラブルが起きた時に何が起きているのか、どう対処したら良いのかがさっぱりわからなかったので、「Fluentd ってログの収集とかに使われるやつでしょ?」程度の知識しかなかった過去の自分に向けて「とりあえずこれぐらいは知っておけ!」と言いたい内容をまとめてみました。 トラブルが起きた時にどの処理で問題が起きているのか素早くコードを追うことができて、データの消失を最小限に抑えつつ適切に対処できるようになることを目的としています。 なお、現時点で最新版の Fluentd v0.14.21 を対象にしています。 アジェンダ Getting Started Fluentd のアーキテクチャ Processes Supervisor process Worker process Threads Input thread En

    Fluentd 入門 〜運用に必要な基礎知識〜
  • トレジャーデータ、データ転送ミドルウェアFluentdの商用版「Fluentd Enterprise」の提供を開始 ―データの暗号化、認証済み各種プラグインも提供 | gihyo.jp

    トレジャーデータ、データ転送ミドルウェアFluentdの商用版「Fluentd Enterprise」の提供を開始 ―データの暗号化、認証済み各種プラグインも提供 トレジャーデータ(⁠株⁠)は、同社が中心となって開発しているオープンソースのデータ収集ミドルウェア「Fluentd」の機能を強化し、エンタープライズ向けに商用化した新製品「Fluentd Enterprise」の販売を7月11日より開始した。 Fluentdはもともと共同創業者である古橋貞之氏がオープンソースソフトウェアとして開発し、企業等にも広く使われているデータ収集ソフトウェアの定番の1つ。2016年11月にはCNCF(Cloud Native Computing Foundation)の管理するプロジェクトに認定、トレジャーデータ在籍のコミッターが80%を占めるコミュニティで開発が進んでいる。 今回販売開始となった「Flu

    トレジャーデータ、データ転送ミドルウェアFluentdの商用版「Fluentd Enterprise」の提供を開始 ―データの暗号化、認証済み各種プラグインも提供 | gihyo.jp
    braitom
    braitom 2017/07/12
    おお。
  • Fluentdとログ収集のパターン - Go ahead!

    「ログを集めて保存する」と言うのは簡単だけど,ログ収集の構成にはいくつか方法があり,勉強会などでちょくちょく聞かれるので,いくつかのパターンについて書く. 「俺はもうバリバリログ収集やってるぜ!」という人は多分すでに知っていることが書かれているので,タブを閉じて良い. ここではログコレクタにFluentdを想定しているが,他のログ収集プロダクトにも適用出来るはず. ただ,Fluentdはタグベースのルーティングを持ち,単体でもキューのように動作させることが可能で,既存のものより複雑な問題を解決しようとしているので,少し工夫が必要かもしれない. Fluentdそのものについては公式ドキュメントや,Fluentdとはどのようなソフトウェアなのかを参考に. クライアントから直接保存する いきなりFluentdを使わないパターン.JavaScript SDKを提供している解析サービスやモバイル端末

  • 1