こんにちは、SREエンジニアのたっち(@TatchNicolas)です。これまではPythonによるサーバサイド開発を担当していましたが、SREエンジニアとしてプロダクトを横断して安定性・パフォーマンス改善に取り組む担当になりました。 ヘルスチェックしにくいバッチ系のECSタスク JX通信社では、ワークロードのほとんどをAWS LambdaまたはECSの上で動かしています。 Webサービス自体やAPIなどはALBやECSサービスのヘルスチェックを使って異常を検知したり、StatusCakeのようなサービスを使って外形監視をすることができます。 しかし、エンドポイントを持たないバッチ処理のようなタスクは、タスク自体が起動に失敗したり、途中で失敗した場合に上記の方法では検知することができません。 そこで、AWSの強力な機能の一つであるCloudWatch Eventsを使って、うまく動作しなか

ども、大瀧です。 Amazon ECSのサービススケジューラは、ECSでサーバーアプリケーションを実行するための機能です。Auto Scalingなどもありますが、事前に設定したコンテナ数を維持するようにコンテナを適宜起動したり、コンテナのリビジョン管理をしてくれます。 コンテナ(ECSではタスクと呼びます)の実行を妨げる要因は様々あり、「起動しようとするけど動かずタスクの停止と起動を繰り返す」という無限ループ(スロットリング状態)になることがしばしばあります。本ブログでは、これを検知するためにCloudWatch Eventsを利用する手法をご紹介します。 ECSタスクのライフサイクルとループのパターン ECSはDockerコンテナおよびその集合をタスク、タスクの状態をステータスとして把握し、そのライフサイクルを管理します。通常のライフサイクルはPENDING(実行待ち)→RUNNING

【ECS管理者必見】ECSサービスがCloudWatch Eventsに対応しサービスの状態変化検知が非常に簡単になりました！ 「ECSサービスのイベントをもっと手軽に取得したい」 そんなあなたにピッタリの新機能が発表されました！ Amazon ECS Service Events Now Available as CloudWatch Events ECSサービスの各種イベントをCloudWatch Eventsで取得可能となったことで、従来より遥かにECSクラスタの状態変化へのアプリケーション実装が簡単になっております。ECSを本番ワークロードで運用している方必見の機能なので、ぜひご一読ください。 ECS運用管理簡単機能きたか…!! ( ﾟдﾟ)　ｶﾞﾀｯ /　　 ヾ ＿_L| /￣￣￣/＿ ＼/　　　/ ECSサービスがCloudWatch Eventsに対応してなにが良いのか？ A