タグ

関連タグで絞り込む (2)

タグの絞り込みを解除

Hadoopとvitualizationに関するyukimori_726のブックマーク (1)

  • top/vmstatの出力をHadoopとDunkheadで可視化し、Linuxシステムの負荷状況を把握する

    はじめに Dunkheadはタイムスタンプ付きのテキストデータ(アクセスログなど)を手軽に可視化するためのソフトウェアです。Hadoop上で動作するため、データのサイズが大きい、いわゆるビッグデータの場合にも使用することができます。 今回はtopとvmstatの出力を時系列のログファイルとして扱い、Linuxシステムの負荷状況について、Dunkheadを使って可視化してみたいと思います。 プロセス毎のCPU使用率を可視化する topの標準出力をファイルに記録するために、-bオプションを使ってバッチモードで実行します。また、インターバルを5秒にするため、-dオプションに引数として5を与えます。またtopが各行末に付ける余分なスペースの削除と、タイムスタンプを付加するために、下記のようにRubyを使用します。 top -b -d 5 | ruby -ne '$line = $_.sub( /

    top/vmstatの出力をHadoopとDunkheadで可視化し、Linuxシステムの負荷状況を把握する
  • 1