時系列データベースという概念をクラウドの技で再構築する - ゆううきブログ
サーバ監視サービスMackerelにおいて開発中の、高解像度・長期間のサーバメトリック収集を実現するための新しい時系列データベースDiamondを紹介します。具体的には、Amazon ElastiCache、Amazon DynamoDB、Amazon S3を組み合わせ、Amazon Kinesis StreamsとAWS Lambdaによりコンポーネント間を接続した、階層構造のデータストアアーキテクチャの設計と実装を解説します。 2018/06/05 追記: この記事の内容をWSA研#2でより一般的なアーキテクチャレベルでの貢献として書き直しました。 サーバレス時代におけるヘテロジニアス時系列データベースアーキテクチャ - ゆううきブログ はじめに 先日開催されたAWS Summit Tokyo 2017にて、「時系列データベースという概念をクラウドの技で再構築する」というタイトルで登壇
メール経由の監視系の通知をどのようにSlackに集約するか on AWS - Qiita
こんにちは、GoodpatchのProttチームでインフラを担当しています @urapico です。 今回は、メール経由で通知がくるものをどのように、Slack に集約するのかというお話です。主にAWSのお話でもあります。 サーバー監視系のソフトウェアの場合、結果をメールで通知してくるものが、いくつかあります。 例） - Tripwire - Logwatch ただ、Prottチームでは、様々なディスカッション、CIの結果、コードレビューのメンション、DeployなどをSlack上で行っています。 なので、上記のようなソフトウェアの結果もSlackに集約できることがよりベターです。 AWS SES まず、ソフトウェアのメールの受け先として、AWS SESを利用します。 SESは、メール送信のプラットフォームとして、非常に有名で活用している人も多いと思いますが、実は、メールを受信することも可
CloudWatch Logs Subscriptionsを利用したZabbixへのログ転送｜Developers.IO
はじめに 先日、CloudWatch Logs Subscriptionsという新機能の発表がありました。 CloudWatch Logsに記録されたログイベントをリアルタイムにKinesisへ投入する機能です。 これまでは、ログイベントを取得する場合、CloudWatch LogsのGetLogEvents APIにアクセスし一括でログを取得するしかありませんでした。 そして、このGetLogEvents APIには1アカウントあたり秒間10リクエストまで(上限緩和可)という制限があり、多くの種類のログを常に取得し続けたい場合は注意が必要でした。 今回、CloudWatch LogsからKinesisにログイベントを投入可能になったことにより、Kinesisストリームをポーリングするだけで常に最新のデータを取得できるようになりました。 また、KinesisはLambdaのイベントソースと
【セッションレポート】ZabbixによるAWS監視のコツ #cmdevio2015H | DevelopersIO
はじめに 先日開催されたDevelopers.IO 2015で『Developers.IO 2015』というタイトルで発表いたしました。 利用した資料と当日いただいたアドバイスを紹介します。 スライド 概要 次のような内容を紹介しました。 Zabbixの用語説明 弊社でのZabbix利用例 Zabbixを使ったAWSリソースの監視 Zabbixへのホストの自動登録 Zabbixサーバ自身の監視方法 発表後、Zabbixへのホスト自動登録について2つアドバイスを頂きました。 1つは、ホスト登録時の通知についてです。 発表ではZabbixのアクティブエージェントを利用した自動登録を紹介したのですが、登録時に通知メールを飛ばしたほうが良いのではないかとアドバイスを頂きました。 これまで自動登録に失敗したことがなかったため、登録時の通知については検討していなかったのですが、言われてみれば監視対象が
Amazon EC2のインスタンスにスケジューリングされているイベントを通知するNagiosプラグインcheck_ec2_eventsを改良した - このブログはURLが変更になりました
Amazon EC2のインスタンスにスケジュールされたイベントはAmazon EC2 API Toolsに含まれるec2-describe-instance-statusで取得できるんですが… Amazon EC2 API Toolsはとにかく起動が遅い 遅い。とにかく遅い。洒落にならんぐらい遅い。やってらんねー！とお嘆きの全国1億2000万人の皆様、いかがお過ごしでしょうか。 そこでcheck_ec2_eventsですよ そんな折、Pythonモジュールのbotoを使ったNagios用プラグインcheck_ec2_eventsなるものを発見。よーしこれで我々も勝つる！大丈夫だ！もっと監視できる！ がしかし check_ec2_eventsはリージョン指定ができなかったり（us-east-1固定）、複数インスタンスがあるとインスタンスの数だけAPIを消費するという残念実装。これはあかんやつ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
draw.ioで描いたかっこいい図をAmazon CognitoであれしてAmazon CloudWatchとつないでAWS監視ダッシュボードもどきにする！ - イノベーション エンジニアブログ
AWS初心者向けWebinar これで完璧、AWSの運用監視