身に覚えのない170万円の請求が……AWSの運用管理で起きた“4つのしくじり”

「AWSを使って構築したお客さまの環境を日々運用していく中で、これまでさまざまな失敗を経験してきた」――アイレットの古屋啓介さん（クラウドインテグレーション事業部インフラエンジニア）は、クラウドインフラの運用管理者向けイベント「Cloud Operator Days Tokyo 2020」のセッションでこう明かした。 アイレットはクラウド専業のSIer。AWS（Amazon Web Services）のマネージドサービス「cloudpack」なども提供しているが、細かい仕様の見落としなどが原因で、cloudpackの運用でいくつかの“しくじり”があったという。 身に覚えのない170万円の高額請求がAWSから来た 古屋さんによると、特に印象に残っている失敗は4つ。その1つ目は「Amazon Athena」で170万円の請求が来たことだ。 AthenaはAWSが提供するPaaSで、オンラインス

[koluku]

"　「Lambda関数を連続して呼び出す場合、AWS Lambdaはできる限り実行コンテキストを再利用する」"ここ気をつけてても引っかかりそうだなぁ

[cinefuk]

『動かしてみると、Lambda上のコードが無限ループに陥っており、AthenaからS3に対して昼夜問わずひっきりなしにクエリが発行された。そのため東京regionのS3から米国regionのAthenaに対して予期せぬ大量のデータ転送が』

[nmcli]

AWSの料金をAMEXカード払いにしたのは失敗だった。締め日が毎月3日のAMEXと相性悪い。支払いが無い月があったり、その翌月2か月分の請求が来たりと経理上都合が悪い。残念ながら他ブランドのカードを作ることになった。

[kaiton]

クラウドサービス、確かに通信料の方が高くなることあるから、気を付けないと詰むなー

[karkwind]

クラウドはこれがあるから怖いんだよな…(気をつければいい話だが、結構大変

[at_yasu]

「Lambda関数内で再帰的なコードを使用することはアンチパターン」

[ys0000]

こういう情報は嬉しい。転ばぬ先の杖だ。

[georgew]

落とし穴多いなぁ。テストできないのかね???

[IIIIIIIIIIIIIIIIIIII]

本当にあった怖い話

[shikiarai]

lambdaでループを書くなんてそんな怖いことをしてはいけない（何も出来ない）

[impreza98]

Lambdaの動作確認をロクにしないままトリガー仕掛けて翌日CloudWatch見て顔面蒼白になる、というのは誰もが通る道だよね（？

[adatom]

そもそも上限設定に関するサービスが全然きめ細やかじゃないと思うのだが。まあ異常高額請求を防ぐためのシミュレーションや異変通知するサービスの細やかな充実なんて別に儲からないものね

[exsoul]

Lambda無限ループ事案ここ数年で何回か聞いたので本当に気をつけるべき

[B-108]

世の中ＩＴでどんどん便利になっているはずなのに、埋まっている地雷がどんどん増えているような気がするのは気のせい？

[circled]

AMEXのカードの締日は人によって違う。自分のカードの場合20日だ。そのため勝手にAMEXのせいにしないでくれ。

[ytakano]

夏のホラー

[atauky]

引っかかるまで、ドキュメントのそこに気をつけなければならなかったのか！って気がつきにくいものよね。

[UhoNiceGuy]

一応、上限設定はできるのか。でもプログラムのミスで170万は痛いな

[ohsawa0515]

ひぇっ…！

[Kil]

「予期せぬエラーが出た」→「調べてみたら公式ドキュメントにしっかり注意事項として記載」のパターンばっかり。サポセンに「何もしてないのに壊れた」って言ってくるレベルじゃん。

[manFromTomorrow]

定期的にみるやつ

[spark7]

いつもの泣き落としかと思ったら違ったみたいね https://www.slideshare.net/shinichitakahashi790/athena-74059026

[ksk_uchimura]

EFS のバーストクレジットと、Lambda の連続使用によるテンポラリストレージの枯渇

[mobits]

“動かしてみると、Lambda上のコードが無限ループに陥っており、AthenaからS3に対して昼夜問わずひっきりなしにクエリが発行された” バカじゃね？

[sen47]

全部あるある。

[nobodyplace]

便利だけどその分罠も多いよね。しっかり調べてしっかり運用。大事。

[deep_one]

今まで見た「高額請求」は全てSQLがらみだった気がするなぁ。