タグ

ブックマーク / qiita.com/akito1986 (2)

  • データ分析におけるワークフローツール - Qiita

    はじめまして、普段はサービス開発やら収集したデータをごちゃごちゃ整形したりしているakito1986です。 この記事はIDCフロンティア Advent Calendar 2015の7日目の記事です。 さてあれよあれよという間に7日目もあと残すところ一時間! 担当した日に公開しないとあまり意味がないと思い、さっと書けそうで最近興味があり必要性を感じているワークフローについて調べたことを書きます。 はじめに 冒頭に書いた収集したデータをごちゃごちゃ整形の部分の話。 サービス事業者でエンジニアをしていると、「このデータとこのデータをがっちゃんこして、こういう形式のデータにして欲しい」と頼まれることが多いのではないでしょうか? 私も頼まれることがあり、「定期的に送られてくるCSVをテーブルにインポートしてクエリで集計してその結果を出力するだけでいいんでしょ?」という最初は軽い気持ちで引き受けたので

    データ分析におけるワークフローツール - Qiita
  • Dstat + Fluentd + Influxdb + Grafana - Qiita

    はじめに 検証時に各サーバーのリソース状態を取得してリアルタイムで見たいなと思って、fluentd、influxDB、Grafanaという構成でいいかなと思い調べた。 リソース情報はdstatで取得した。 環境 OS: CentOS7.1 Ruby: 2.2.2p95 dstat: 0.7.0 fluentd: 0.12.15 influxDB: 0.9.2 Grafana: 2.1.3 Install dstat、fluentdについては以下でインストール出来る。

    Dstat + Fluentd + Influxdb + Grafana - Qiita
  • 1