タグ

2013年6月4日のブックマーク (2件)

  • Treasure Data - naoyaのはてなダイアリー

    少し前にログの話を書いた http://d.hatena.ne.jp/naoya/20130219/1361262854 ときに、Treasure Data については後日にもう少し詳細に書くと言ったので書くとしよう。 近頃 Treasure Data (以下、時折 TD) という名前をちらほら聞いたことがある人は多いのではないかと思います。「ビッグデータのクラウドサービスである」とか「日人が創業したシリコンバレーのベンチャー」、あるいは Yahoo! 創業者の Jerry Yang が投資したとか、Fluentd と何か関係があるといった文脈などなど。 けど、具体的に Treasure Data がどういうサービスで、どういう機能を持っていて、どんな場面で利用されるものなのかはまだあまり良く知られていないかもしれない・・・ようにも見える。今日はその辺から少し紹介していこうかなと思う。

    Treasure Data - naoyaのはてなダイアリー
    chanpon0
    chanpon0 2013/06/04
    Treasure Dataとデータ(ログ)の扱いについて。
  • Fluentdとは - ぽにくすじゃないだいありー

    fluentd | 23:34 | fluentdはプラグイン構造と構造化データとリアルタイム処理が特徴のログ収集ツールで、自由度がきわめて高くログを扱うためのクラスタを構築できる。入力・出力・バッファにそれぞれプラグインを使うことで、様々な入力を構造化し、様々なフィルタリングやバッファリングを行い、様々な出力先に出力することができる。いくつもの言語にFluentロガーが用意されているのでそれ経由で出力することもできるし、テキストログをパースすることで既存のシステムに変更を加えず新しくログ収集の仕組みを追加することもできる。あえて難点をいうとRuby1.9系でしか動かないので、Ruby1.9.xをインストールするか、td-agentというパッケージを導入しなければならない(td-agentに関してはまだ試してない。セッションを聞いた限りではRubyを同梱したfluentdパッケージだと思う