AWSのBilling障害の対応への反省点

7月17日午後5時半頃からAWSのコストが過大に表示されるという障害が発生しています。この問題への自分の対応があまり良くなかったと反省しています。障害対応のだめな例として参考にしていただくために、恥を忍んで公開します。 前提 影響があったのは個人のアカウント（ISUCONに参加するために作り、あとで使うかもと思い放置していた） AWSの操作にはあまり慣れていない（とくにIAM周り） 主な反省点 コストアラートのメールを見た後の自分のとった行動のなかで、よくなかったと思うことは次の点です。 （個人のアカウントの問題とはいえ、AIすら頼らず）1人でパニック状態のまま初動対応を行った 提示されたコストを自分の慣れた単位（円）に変換せず、金額を全く疑わなかった 問題を早く解決しようとして、短絡的にすべてのリソースとIAMを削除した（まったく使っていないアカウントとはいえ） タイムライン 18時30

[nguyen-oi]

障害発生時にパニックになって適切な判断ができなくなるの、エンジニアなら誰でも身に覚えがありすぎて泣ける

[tinsep19]

特定の予算を使い果たしたら、IAMから権限をすべて剥奪するトリガーを設定できるようです。