ECSのTask数がいつの間にか0に？Task消失事件の顛末 - エムスリーテックブログ

【デジカルチーム ブログリレー5日目】 デジカルチームの井上 渉 (@wtr_in) です。米がなければということで、餅をよく食べています。実は餅はお正月以外も食べて良いんですよ皆さん。 さて、2024 年 7 月と結構前の話になりますが、AWS で以下のようなアップデートがありました。 aws.amazon.com このアップデートにより ECS が Task を起動する際にイメージを特定する挙動が変わったのですが、デジカルではその影響で、テスト環境の ECS Service の Task 数がいつの間に 0 になる というトラブルを経験しました。割とエッジケースなので、多くの方が遭遇することはないとは思いつつ、ある意味面白い事象だったのでその内容を紹介しようと思います。 どんなアップデートだったか？ そして起きた ECS Task 消失事件 🚨 事件の原因 🔍 要因(2) ECR

[michael19w]

Instance数でアラートと思ったけどQAだから気付けずってことか、こわ

[iselegant]

なるほど、ためになった。確かにDocker builxのキャッシュ優先するなら、cacheイメージタグ等で上書きできるように、ECRのImmutable設定OFFにせざるを得ないよね。

[Anonymous2000]

おおお、危険ですな。参考になります。ありがとうございます。