AWS Batchとそのモニタリング方法について - yasuhisa's blog
最近、仕事や趣味でAWS Batchをよく使っています。仕事と趣味のそれぞれの用途は以下の通りです。 仕事: 機械学習を用いた異常検知システムのパラメータ学習 PyCon mini Osakaで異常検知システム構築の裏側について発表しました - yasuhisa's blog 学習データ取得と混合ガウス分布のパラメータ推定が元気に動いています 趣味: ML Newsという機械学習関連のエントリをまとめてくれる君 元になるエントリをTwitterから取得する部分 機械学習に関連するエントリか判定する分類器の学習 取得してきたエントリの判定 AWS Batchの使い方やモニタリング方法が大分こなれてきたので、エントリにまとめておきます。 AWS Batch is ... AWS Batch is not ... モニタリング方法 Job Queue Statusのモニタリング 成功/失敗したタ
新しい collectd の CloudWatch プラグイン | Amazon Web Services
Amazon Web Services ブログ 新しい collectd の CloudWatch プラグイン これまでご自分のビジネス、アプリケーション、システムメトリックスを Amazon CloudWatch で保存されてきたと思います (詳しくは「Amazon CloudWatch の新しいカスタムメトリックス」をご覧ください)。随分前のことになりますが、私が 2011 年に書いたブログで「ユーザーの AWS リソースを CloudWatch で保存しているように、グラフを表示したり、アラームを設定、自動化したアクションをこうしたメトリックスに基づいて設定することができます。」といったように、この機能についてご紹介したことがあります。 そして本日より、新しい CloudWatch プラグイン collectd 対象を使用することで、ユーザーのシステムから統計を収集する方法を簡略化し
Librato Has Leveled Up. Introducing SolarWinds® AppOptics™
Librato Has Leveled Up. Introducing SolarWinds® AppOptics™. AppOptics combines all the great features of Librato with new, additional functionality including host maps, distributed transaction tracing, 150+ cloud-ready integrations, and affordable pricing. Start AppOptics Free Trial Custom Metrics A fully customizable metrics platform. Quickly collect custom infrastructure, application, and busine
Librato Metrics introduction - Go ahead!
Librato Metricsをうちではモニタリングに使ってるんですが，日本で全くと言って良いほど記事を見ないので，紹介記事を書いてみる． 何が出来る？ おおまかに分けて以下のようなことが出来る． メトリックスを作れる メトリックスに対してアラートを設定出来る ダッシュボードでメトリックスの一覧が見れる JavaScript SDKを使って自分のサイトに埋め込むことが出来る APIが提供されていて，いくつかの言語のクライアントがある 以下それぞれ簡単な説明． メトリックス LibratoにはMetricというのがあり，これが最小の単位．Metricに監視したいメトリックスの値を入れていき，他のMetricと混ぜたりすることでモニタリングを行います． 上の例のように，一つのMetricに複数の軸の値を入れることが出来ます．これはソースと呼ばれていて，保存する時にsourceを指定すれば良いで
Collect metrics, logs, and traces using the CloudWatch agent - Amazon CloudWatch
Collect metrics, logs, and traces using the CloudWatch agent The CloudWatch agent is a software component that collects metrics, logs, and traces from your Amazon EC2 instances, on-premises servers, and containerized applications. It enables you to monitor your infrastructure and applications more comprehensively than the basic monitoring provided by default. The CloudWatch agent enables you to do
Riemann - A network monitoring system
Riemann aggregates events from your servers and applications with a powerful stream processing language. Send an email for every exception in your app. Track the latency distribution of your web app. See the top processes on any host, by memory and CPU. Combine statistics from every Riak node in your cluster and forward to Graphite. Track user activity from second to second. Riemann provides low-l
CloudForecastっていうリソース監視のツール／フレームワーク作った - blog.nomadscafe.jp
「クラウド」って言ってみたかった。今は反省していr 上のグラフは前回のエントリーを公開したときの、当blogを配信しているサーバのトラフィックグラフです。記事を公開した17時にぴょーんとトラフィックが伸びています。4時にも増えているけどこちらは謎。 実はこのグラフもCloudForecastを利用して取得しています。CloudForecastはサーバ等のリソース監視を行うツールもしくはフレームワークで、rrdtoolの薄いラッパーとして動作し、小規模から大規模なサーバ群を一括で管理できるように設計してあります。tokuhirom曰く、「perlが書けてrrdtoolがつかえるsysadminの人だったら使いやすいと思われる」というのがもっともしっくりくるような気がします。Perlとrrdtoolが使える運用者によるカスタマイズ前提なのがフレームワークと呼んでいる所以です。 CloudFor
Banzito Managed Applications
Hidden Costs of DIY IT Lost Time: Founders & ops managers spend hours on account setup, troubleshooting, and access requests. Productivity Drain: Employees wait days for new tools or fixes, hurting efficiency. Security Gaps: Missed MFA, unrevoked accounts, or weak access policies = risk of data breach. Compliance Risks: Lack of audit trails and access controls can lead to penalties and failed cert
GrowthForecast - Lightning fast Graphing / Visualization
GrowthForecast is a web tool that let's you graph all sorts of metrics via a WebAPI. Our simple API let's you create and update charts in real time, customize your charts through a Web interface, and create charts that combine multiple metrics. You can graph your MySQL data with 1 line of code $ crontab -l */5 * * * * curl -F number=`mysql -BN -e 'select count(*) from member' game` http://example.
オペレーショナル インテリジェンス、ログ管理、アプリケーション管理、企業のセキュリティおよびコンプライアンス | Splunk
Splunkがガートナー社によるSIEM部門のマジック・クアドラントで11回連続でリーダーの1社と評価された理由をお確かめください
トラブルをわざと発生させサーバ問題解決能力を鍛える「Trouble-Maker」 - GIGAZINE
ほとんどのシステム管理者が経験したことがあるはずの状況は「何か悪いことが起きていて、サーバがダウンしているが、しかし何が起きているのか分からない」というシチュエーション。サーバを管理するシステムアドミニストレーターなどの立場でいると何が大変かというと、実際の製品として動かしている実環境でこのような問題が発生した場合です。 そこで役に立つのがこのオープンソースソフト「Trouble-Maker」です。 Trouble-Maker http://trouble-maker.sourceforge.net/ システム管理者の仕事を簡単にするため、多くのツールが存在していますが、未知の状況を経験している場合になんとかしてくれるわけではありません。この一連のソフトウェア群「Trouble-Maker」は既存の便利なツールとは異なり、問題を解決するのではなく、むしろ問題を引き起こします。インストールし
God - A Process Monitoring Framework in Ruby
A Better Way to Monitor God is an easy to configure, easy to extend monitoring framework written in Ruby. Keeping your server processes and tasks running should be a simple part of your deployment process. God aims to be the simplest, most powerful monitoring application available. Tom Preston-Werner tom@mojombo.com Google Group: http://groups.google.com/group/god-rb Features Config file is writte
ScaleOut | Supership
TARGETING正確かつ豊富なデータで きめ細やかなターゲティング 独自データによるユーザーの属性や興味関心などの精緻なセグメントで的確にアプローチが可能です。 MARKETINGデータが導くインサイトでマーケティングを加速 広告配信前に最適な打ち手を把握することや、広告配信後に詳細な効果の見える化を可能にします。 様々な観点から ユーザーインサイトと効果を分析 ※上記は一例です AD VERIFICATIONアドベリフィケーションツールを デフォルトで搭載 ブランド毀損やアドフラウドのリスクを排除した広告配信を実現。ビューアブル計測にも対応しています。 Brand Safety クライアントのブランド毀損を招きかねない粗悪な掲載面や不適切なページへの広告配信を未然に防ぎ、毀損リスクを排除。クライアントのブランド価値を保護します。 Anti-Fraud 不正ボットへの広告配信や不正な広告
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ハコフグ | きままなブログ | Page 6
PagerDuty | Real-Time Operations | Incident Response | On-Call
Error Monitoring, Log Management, APM | Scout Monitoring
サーバ異常検知入門
GitHub - comerford/mongo-munin: Munin plugins for MongoDB
Real-Time Web App Performance Monitoring : New Relic
#12: Fixed: rake handler failing when exception happens before Airbrake has been configured by leonid-shevtsov for thoughtbot/airbrake - Pull Request - GitHub