こんばんは。 舌の根も乾かぬうちにサボってしまいました。 昨日の分まで埋めるために、ちょっと分量おおめで。 今回はワタクシのおすすめツール、Splunkの紹介です。 まだ全然触れていないのですが、とても良いツールだと思います。 無償版もあるので是非使ってみてもらいたいですね。 Splunkとは データ収集・分析・管理ツール。 取り込みの設定をして、放っておくだけでどんどんと蓄積・データ分析してくれる。 また、指定のメッセージが出た際にアラートをあげたりなんかもできる。 さらに、ユーザや企業が作り込んだAPP(特定の用途向けにカスタマイズされたSplunkのコンテンツ集的なもの)をインポートして利用したりすることもできる。 基本はオンプレミスだが、最近Splunk Stormというクラウドサービスも出た模様。 →オンプレとの比較はこちら。http://ja.splunk.com/view/S
ご無沙汰しております、今回のブログ担当の髙橋です。 猛暑が続いておりますが、皆様はいかがお過ごしでしょうか。 私たちビッグデータチームは、暑さに負けず、ビッグデータに関連するBIツールやDWHの調査を行っております。 その一環として、7月5日に開催されたsplunk>live!に参加しましたので、その報告とSplunkの導入方法を紹介致します。 splunk>live!の報告 以下の5つの発表が行われました。 Splunkの概要とデモ 事例:稼動データ活用による昇降機メンテナンスサービス 事例:標的型サイバー攻撃への実践的対策 事例:MDMサービスでのSplunkを活用したサービス監視 Splunk最新製品動向 1. Splunkの概要とデモ Splunkの概要 Splunkの根底技術は、サーチエンジン技術である。 これに、全てのログデータをTimestampでソートし、Key-Value
2013-08-21 fluentd 自身のログを Splunk で監視する アプリケーションログの集約には fluentd を使えるが、fluentd 自身のログファイルを fluentd で送るわけにもいかないので、別系統で監視したい。 Splunk を使ってログをチェックするダッシュボードを作成したのでまとめておきます。 モニタリング設定 まず、各ホストの Splunk Universal Forwarder にログファイルを登録。 $ sudo /opt/splunkforwarder/bin/splunk add monitor \ /var/log/td-agent/td-agent.log -sourcetype td-agent # または /opt/splunkforwarder/etc/apps/search/local/inputs.conf を編集 これで全ホスト
ウェブアプリケーションのログ収集には fluentd を使うとして、集めたログを検索したりグラフ化するには、別途システムを組む必要がある。 最近だと、オープンソースの Kibana というのが流行っているようで、公式ページにも紹介がある。 Free Alternative to Splunk Using Fluentd | Fluentd ここで比較対象とされている "Splunk" だけど、これを fluentd と組み合わせて使っている人は多くないようなので、軽く紹介しておきたい。 Splunkとは? 商用のログ収集&検索エンジンとしてはメジャーな製品で、 独自のクエリ言語でログを検索、加工、集計、グラフ化する あらかじめダッシュボードを作っておいてPDFでレポートを送る 検索条件を設定しておいてアラートを飛ばす といったことが出来るようになっている。 詳しくは公式のビデオでも。 Sp
サーチ処理言語 (SPL:Search Processing Language) 入門書/説明書 Splunk Chief Mind、David Carasso ビッグデータには計り知れないビジネス上の価値があります。Splunk はその価値を探し出すための、とても強力なツールです。『Splunk を使ってみよう』は、マシンが生成する複雑で膨大なデータから、目的の情報やパターンを識別する方法について説明しています。本書では、Splunk の利用方法を簡単に理解できるように、さまざまなグラフィックが使用されています。Splunk の基本を学習したら、その知識を応用して、現実世界のさまざまな問題に対処するための、ビッグデータに隠されている情報と言う名の宝物を探し出してください。 パート 1:Splunk を使ってみよう 第 1 章では、Splunk の概要とそれがどれだけ役に立つのかを紹介して
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く