タグ

fluentdに関するt-wadaのブックマーク (5)

  • Fluentd v1.0

    Logging is a critical component on production environments that allow us to perform monitoring and data analysis. While applications runs at scale, the Logging layer also needs to scale and year over year we see new challenges that needs to be solved from different angles such as parsing, performance, log enrichment (metadata), filtering and so on. Fluentd was born to solve Logging problems as a w

    Fluentd v1.0
    t-wada
    t-wada 2017/12/08
    祝 Fluentd v1.0 リリース!
  • Fluentd Goes Gopher! | Fluentd

    I am pleased to announce that Treasure Data just open sourced a lightweight Fluentd forwarder written in Go. Creatively christened as Fluentd Forwarder, it was designed and written with the following goals in mind. A simple forwarder for simple use cases: Fluentd is very versatile and extendable, but sometimes you need something simple. Fluentd Forwarder is meant to be an alternative for such case

    t-wada
    t-wada 2014/11/06
    Fluentd forwarder のオフィシャル Go 実装 "many thanks to Moriyoshi Koizumi for writing the initial version" gocon で発表されていたやつかな?
  • Ik in action

    This document discusses ik, an alternative implementation of fluentd developed by Moriyoshi Koizumi. It describes ik's features like small memory footprint and built-in scoreboard compared to fluentd. It also discusses Koizumi's use of ik in a production environment to remotely collect logs from Windows tablets running .NET applications, where ik was deployed alongside fluentd and stunnel to trans

    Ik in action
    t-wada
    t-wada 2014/06/01
    #golang による fluentd 互換実装 "ik" に関する講演スライド。 Windows で普通に動いているのが凄い #gocon
  • Norikra v1.0.0 - たごもりすメモ

    English article 以前からスキーマレスなストリーム処理をSQLで!というソフトウェアとして作っていたNorikra、このたびあちこち機能改善したりしたので、既にお仕事で絶賛稼働中ということもあるし、区切りとして v1.0.0 としてリリースした。 ついでにロゴとかも作ったので、なんとなくいい感じになりつつある。 https://rubygems.org/gems/norikra/versions/1.0.0-java http://norikra.github.io/ 修正点は リポジトリ のChangesに書いてあるが、curlだけで操作できるようHTTP JSON APIが加わってたり、GCまわりでハマらないようなデフォルトオプションが入ってたり、分析系クエリを書きたい人のために Group-by with Rollup や Grouping sets, Cube などの

    Norikra v1.0.0 - たごもりすメモ
    t-wada
    t-wada 2014/05/20
    semantic versioning の時代に v1.0.0 をリリースすることの意義深さよ! 気高く、尊い。素晴らしい!
  • LTSVフォーマットなログを fluentd + GrowthForecast で料理 - naoyaのはてなダイアリー

    ここ数年のデータ解析の重要性の高まりから、ログに関するソリューションが方々で活発に探求されている昨今でございます。ウェブサーバーの単純なアクセスログをそのまま保存するではなく追加情報を添加してみたり、あるいはアプリケーションから直接ログを吐いてそれらをデータウェアに投げ込んで・・・というのも当然のように行うようになりましたね。 しかしあまり自由度のない access_log の combined フォーマット。さてどうしたもんか・・・ ここで id:stanaka の登場です。 Labeled Tab Separated Valueというのは、はてなで使っているログフォーマットのことで、広く使われているTSV(Tab Separated Value)フォーマットにラベルを付けて扱い易くしたものです。はてなでは、もう3年以上、このフォーマットでログを残していて、one-linerからflue

    LTSVフォーマットなログを fluentd + GrowthForecast で料理 - naoyaのはてなダイアリー
    t-wada
    t-wada 2013/02/06
    naoya さんから御大と呼ばれて思わず瞳孔が開いたアカウントがこちらになります。最近の naoya さんのエンジニア日記力すごいなぁ
  • 1