kzkのブックマーク / 2014年2月17日 - はてなブックマーク

kzk id:kzk

2014年2月17日のブックマーク (6件)

GlusterFSのログをfluentdで集約する | DevelopersIO
はじめに先日「GlusterFSで高可用性メールサーバを構築する | Developers.IO」という記事で、Amazon LinuxでGlusterFSを使ってファイルを分散する構成を作りました。 GlusterFSは分散ファイルシステムなのでノード同士が深い関連性を持っているのですが、この状態だとそれぞれのノードが個別にログを集積してしまい、ログからノード間の因果関係(例えば「あるノードで異常を検知した時に他のノードの状態はどうだったのか」とか)が分かりづらくなってしまいます。こんな時はどうしたら良いのでしょう...そう、もちろんfluentdです。今回はfluent-plugin-glusterfsというプラグインを使って、GlusterFSのログを集約したいと思います！構成 GlusterFSのクラスタノードが2台あり、それぞれ別のAZに配置されています。それらのログを集
kzk 2014/02/17
fluentd
リンク
Hoshi-mi | A Heroku friendly visualization tool
GrowthForecast との比較 Ruby on Rails 製であるため、一緒に使うことが多い Fluentd と親和性が高いです RRDTool を使っていません。RRDTool の生成するグラフに見飽きた方にぴったりです。 Heroku 上で動作することを前提に作られています。そのため、リポジトリを push するだけですぐ使えます。 API キーを知らなければデータを post できないように作られています。その他の機能は GrowthForecast よりも少ないです。ドキュメントマニュアルブログ記事
kzk 2014/02/17
Hoshi-mi は、Heroku で動作することを重視したデータビジュアライゼーションツールです。Ruby on Rails 製であるため、一緒に使うことが多い Fluentd と親和性が高いです。

visualization

fluentd
リンク
ansibleのログをfluentdに流す — そこはかとなく書くよん。ドキュメント
ansibleのログをfluentdに流す¶ Chef のログを Fluentd に流すという記事を読みました。Ansibleにもそのための機能があるにも関わらず、あまり情報がないのでまとめてみました。 callback plugin¶ Ansibleにはmoduleとは別にpluginという機構があります。例えば "{{lookup('file', '/etc/foo.txt') }}" というように使うlookup pluginがあります。他にもconnectionやvarsのpluginがありますが、そのうちの一つに、 callback pluginがあります。 callback pluginはその名の通り、いろいろなイベントが発生した時に自動的に呼び出されるcallbackを登録するためのpluginです。イベントの例としては、 playbookの開始時 taskの開始時
kzk 2014/02/17
fluentd
リンク
Chef のログを Fluentd に流す - blog.ryotarai.info
Developers Summit 2014 での発表（スライド）後、Chef のログを Fluentd に投げてる部分についてツイートをいただいたので、すこしまとめておきます。 GREEさんが昨日発表した，ChefのハンドラからFluentdに投げてMongo DBでデプロイか何かの情報収集してるの，どこかに記事とかあるのかな？ユースケース的には便利なのだけども #fluentd— Mr. Fiber (@repeatedly) 2014, 2月 14 Report (Exception) Handler Chef の Report(Exception) Handler という仕組みを使って、ログを投げています。 Report Handler: Chef の実行が成功した場合に実行されるハンドラ Exception Handler: Chef の実行が失敗した場合に実行されるハンドラ詳し
kzk 2014/02/17
chef

fluentd
リンク
Home
Blueflood DB Blueflood is a high throughput, low latency, multi-tenant distributed metric processing system behind Rackspace Metrics, which is currently used in production by the Rackspace Monitoring team and Rackspace Public Cloud team to store metrics generated by their systems. In addition to Rackspace Metrics, other large scale deployments of Blueflood can be found at Community Wiki. What is B
kzk 2014/02/17
Blueflood is a multi-tenant distributed metric processing system created by engineers at Rackspace.
リンク
Treasure Data Platform で始めるデータ分析入門〜8. Data Visualization Patterns 〜 Part.3 - doryokujin's blog
Treasure Data Intro for Data Enthusiast!! from Takahiro Inoue 本シリーズではデータ分析を以下の7つのレイヤーに分解し，各々について解説していくものとします。（Slide Shareの資料は常時更新されます。） Data Collection Data Storage Data Management Data Processing Data Processing Design Part.1 Part.2 Part.3 Part.4 Part.5 Part.6 Data Visualization Treasure Viewer, MetricInsights, Tableau Data Visualization Patterns Part.1 Part.2 Part.3 本日は「7. Data Visulization Patt
kzk 2014/02/17
Treasure Data
リンク
- 2014年2月18日
- 2014年2月17日
- 2014年2月16日