AWSのAZ障害で影響を受けた・受けなかったの設計の違い。サーバレス最高！ - GS2 Blog

みなさん、こんにちは。GS2 の丹羽です。 今日は大事件が起こりました。Twittetなどでも話題になったので皆さん知っているのではないかと思います。 japanese.engadget.com こんなブログを見に来てる人ならみんな知ってると思いますが、AWSの東京リージョンには3カ所のデータセンターがあります。 そのうち1カ所のデータセンターが完全に利用できない状態になりました。 その影響で様々なゲームも影響を受けたようです。 gamebiz.jp なぜAZ障害が様々なサービスの障害につながったのか さて、なぜ今回のようにAZがダウンするとこのような大規模な障害が発生するのでしょうか。 1. シングルAZ サーバはどこかのデータセンターで動いていてるわけです。EC2を使ってサーバを起動するときにもどのAZに配置するかを選びます。 この時に、一つのAZに固めてサーバを配置していた。あるいは

[kazutomo]

書きました。 / めっちゃブコメついてたので追記

[tolkine9999h]

1AZ全部完全にダメだった訳ではない。そこぐらい正確に書きましょうよ。

[chikisio]

ウチはフェイルオーバー設計してたし、発動条件も満たしてたのにしてくれなかったんだよなぁ。。 PS.めっちゃスターついてるw ウチだけじゃなかったのね〜なみだ

[macoshita]

今回はマルチAZのALBも500返してたみたいだし、別クラウドへのフェイルオーバー組んでない限り運の差でしかなかったと思う https://blog.hirokiky.org/entry/2019/08/23/200749

[hogeanonym_20101012]

今回影響が出たのはEC2とRDSなので、そもそも影響を受けなかっただけ。lambdaもdynamoDBもハードウェア障害の可能性は当然あるんだが。

[chinpokomon_master]

なんで自分達の民度の低さを宣伝するような記事を書いてしまうのか、、、 / 追記で火に油注いでてこの人インターネット向いてないなと思った。

[kuni-kuni]

今回の影響範囲がたまたまEC2だったから助かったんだろとか言ってるのは本当にAWS触ったことあるのか？ EC2より障害発生確率が格段に低い設計になってるのがマネージドのサーバレスだって話だろ。

[hateshinaiz]

だからと言ってサーバレスにしても、例えばLambdaの仮想ホストが落ちたら障害になる。この記事で書かれていることは何も意味がなく、確率論の話に気づかず威張っているだけ。

[momonga_dash]

サーバレスがすごいっつか、AWSのサーバレスの設計実装がすごいってことでは。

[honeybe]

影響が表に出ない構成。確かに…。

[katzchang]

影響が全くなかったのは、たまたま影響がなかったか、影響があったけど検知できてないか、どちらかだろうね。フルマネージドは関係なさそう。

[togusa5]

サーバーレスでSAP作れるようになってから言え

[inductor]

これは燃えそうなエントリー

[yatta47]

インフラ設計が大事っていうのを改めて感じるな。

[azuk1]

やっぱAmaは全ての責任取ってはくれないんだよね〜。その辺理解してないとこは週明けめちゃくちゃトラブルんだろうなあ。他人事だから楽しみだなあ

[yamadadadada2]

フルサーバーレスで実装するのはなかなか難易度高そう。RDSを使わないのが基本になるのかな

[dakahiiiii]

これからどんどんサーバレスが進んでインフラしかできないエンジニアは淘汰されていくんやな～…

[syukit]

それってつまりサーバーレス自体が良いということではないよね

[tohima]

？？？

[bottomzlife]

あほか。マルチAZマルチリージョンでまともに組んでれば基本的には対応できるよ。サーバレスでもリージョン落ちたら自分でフェイルオーバ考えとかなきゃダメ。AWSマンセーじゃ結局ダメなのよ

[napsucks]

chaos monkeyがイタズラしまくる仕組みにしないとダメかな

[kurotsuraherasagi]

「今回はEC2環境が影響を受けた、EC2を使わないサーバーレス環境は大丈夫だった」は事実だね。どのサービスもどんなに対策しても障害の可能性が消えないし、「サーバーレス最高」かどうかは議論の余地があると思うが

[odakaho]

LambdaもCloudWatch見ると一瞬落ちてフェイルオーバーしてるんだろうなーって形になってる。

[haya0606]

PayPayとかマルチAZにしてないはずないと思うんだけどな。

[junpeso]

たまたま影響範囲では無かっただけやん

[l__LINE__l]

Cloudfrontは少し通信エラーがあったけど、サーバレスは概ね同意の状況。設計というか運が良かったと思っている

[kamomako]

すごいですね。こういうことも知っておかないといけないなぁ。。。

[iwanofsky]

たまたま、日経の記事を読んで、次にこの方のブログを拝読。 もやもやの後に、スッキリ爽快。 サービス運用したことない人は、黙って事実だけ書いて欲しいな、と思うのでした。

[John_Kawanishi]

API Gateway･AWS Lambda･DynamoDB等のフルマネージドサービスの組み合わせなら可用性を保てたかぁ…

[dbfireball]

ゲーム会社は今はちょうどサーバレスへの移行過渡期な感じ。EC2を大量に並べてパワーで押し切る設計からジワジワと変えていくしかないというか。

[iwasiman]

サーバレスでやっていて影響なかった方の記事。なるほどー。