[B! kibana] yuuturn0422のブックマーク

Packetbeat+Elasticsearch+KibanaでDNSログを可視化する - Qiita

はじめに少し前の情報ですが、株式会社ラック社からDNSプロトコルを使用したウィルスについての注意喚起がありました。 ■遠隔操作ウイルスの制御にDNSプロトコルを使用する事案への注意喚起 http://www.lac.co.jp/security/alert/2016/02/01_alert_01.html 記事中にそのウィルスへの対応法について記載があり、その1つに「内部DNSのアクセスログから不正なリクエストを発見する（ログを取得する）」があげられています。本事案以外でも、多くのマルウェアは名前解決を行いC＆Cサーバとやり取りを行うため、DNS通信のログを取得することは、調査において重要な情報になると考えます。 DNS通信のログを取得するといっても、単純なパケットキャプチャだと、閲覧しにくい（後で情報を追う時に時間が掛かる）等の問題があります。今回は、以下のオープン・ソースプロダク

yuuturn0422 2016/08/16

リンク

JMeterの実行結果CSVデータをローカルMacにたてたElasticsearchとKibanaで可視化する | DevelopersIO

「JMeterの結果CSV、216万行か〜。これくらいだったらJMeterの「グラフ表示」で読み込んで見られるかな〜」 CPU「ブオオオオオオオオン！」はじめにシステムの負荷試験において、Apache JMeterのようなツールを使って試験を実施・結果を出力するケースもあると思います。結果ファイルのサイズがそれほど大きくない場合は、全データを計算する（JMeterでいう「統計レポート」）で問題ありませんが、例えば、長時間負荷をかけたので時系列でデータをグラフ化したい、といったことになると事情が変わってきます。JMeterの結果CSVは手元にあるので、なんとかこれを活用したいところではありますが、数百万行レベルのデータになると、とたんにExcelなどでは辛くなります（というか最大行数的に無理な気がします）。そこで、ちょうど、弊社木戸がElasticsearchシリーズを連載しているとこ

yuuturn0422 2016/06/08

リンク

ネットワークの可視化 | GREE Engineering

GREE Advent Calendar 2015 の23日目担当の上竹です。普段はアプライアンスLB やネットワークの構築/運用をしております。概要バックボーンネットワークを設計運用していると、実際どのようなトラフィックがどのくらい流れているか中身を知りたい(見たい)ことがよくあります。どのISP からどの回線へどのくらい流入があるのかだったり、どんなAS からどのくらいアクセスがきているか、これら様々な情報を正しく把握することは、Transit 回線やIX 回線をコントロールし今後のネットワーク戦略を考えるうえで非常に有益です。また、昨今我々を悩ましているDDoS 対策の第一歩として、今流れているトラフィックをまず"知る"ということが必要だと思います。そこで、今回ネットワークの見える化を、「NetFlow」、「Fluentd + ElasticSearch + Kibana」

yuuturn0422 2015/12/24

リンク

fluentd -> Elasticsearch 大量データ転送でトラブル | diaspora

概要 fluentd でサービスの情報を転送し、Kibana で分析したいこれまでの過去データを一度に放り込みたいデータの件数が合わない Kibana でエラーが発生する各種設定を見直すことで対応可能背景長い長いミーティングに疲れ、集中力を擦り減らしたアナタは無意識のうちにブラウザを起動していました。去年まで勤めていた会社の同僚がシェアした記事が目に止まります。「fluentd + Elasticsearch + Kibana で今どきのログ分析！」感化されやすいアナタはおもむろに VM を立ち上げ環境を構築します。 Web サーバから吐き出されたログはオシャレでイイ感じにチャート化され、満足したアナタは VM を落とし、再び仕事に戻りました。しばらく経ったある日のこと、ふと気づきます。「ログだけじゃなくて、ユーザ属性の分析にもコレ使えそう。」毎度オレオレ管理ペー