TechCrunch

Apple seems to be finally getting serious about infusing generative AI into its products — both internal and external — after announcing a solitary “Transformer” model-based autocorrec

[katzchang]

ジョーは発見者で、慌て者ではない。

[koyancya]

ここまでのイレギュラー度でありながら４時間で復旧出来るのすごい

[taruhachi]

S3止めたエンジニアだけど、何か質問ある?エントリが待たれる。

[htnmiki]

いまさら無理なのわかってるけどインフラ止まったら命に関わる人以外は数日のんびり休む世界にならないかなあ。停止時間短くするよりそっち方面に人類の叡智を向けてほしい。目指せハメハメハ大王。

[iuhya]

世界のAmazonへの依存度にヤバさを感じる。

[yfujisawa]

この手のシステムにも、年に一回メンテナンス訓練の日を設けてはどうか。依存するシステムも、同じタイミングで訓練する。これによって、異常時の系の挙動の不可知部分を削減し、系全体での可用性を担保する。

[serio]

こういう事例で、ジョーのような発端者をつるし上げて終わりにする組織は数多いんだろうな。IT系にせよ一般社会のシステムにせよ。

[bouzuya]

停止したことがない云々にヤバさを感じる

[makaibito]

“ジョーは正規の特権ユーザーであるため、システムをシャットダウンするコマンドを入力する資格があった。ただしこの作業はAmazonが「確立された手順書（established playbook）」に従ったもので、ここではS3サブシステムの

[RabbitBit]

ここで個人の責任とするのが失敗する運用。プロセスや環境に改善点がないか検討するのが成功する運用。

[causeless]

"@tamosan みてる：AWS、S3の大惨事の原因を公開―ヒューマンエラーが発端だった | TechCrunch Jap…" via https://twitter.com/tamosan/status/837454091575947264

[fake-jizo]

AWSのS3クラウドストレージが4時間にわたってダウンした件は、当然ながら、強い批判を浴びた。AWSは検証レポートを発表し、この事件について原因と経過を詳しく説明した。技術的情報と将来に向けての防止策も含まれてい

[bluesky0804]

こんなに巨大なシステムもこんな程度の管理なのか…

[daybeforeyesterday]

うーむ

[kirifue]

ヒューマンエラーであれ何であれ、原因を徹底的に究明し、対策を立てることができる企業は生き残る。言い逃れ、被害者づら、責任を取らせて終わりは衆愚の極み。 #amazonjp #開発

[l-_-ll]

SLA nine nines の神話崩壊

[wushi]

ジョーを慰めるコメントがたくさんあるけど、みんなジョーがまだ生きていると思っているのか…

[aike]

アマゾンのレポートはヒューマンエラーという言葉は使ってないしジョーの名もない。改善策もよくある教育の徹底やチェックシート項目追加といったものではなくツールの修正であり原因は十分安全ではなかったツール。

[hiroomi]

“昼頃、AWSはサービスの復旧に全力を上げていたが、なにぶんシステムの規模が大きすぎた。”

[TsuSUZUKI]

cf. https://techcrunch.com/2017/03/02/aws-cloudsplains-what-happend-to-s3-storage-on-monday/ , http://www.atmarkit.co.jp/news/201206/22/firstserver.html

[alovesun]

ジョーはヒューマンエラーが大規模に至る危険性を発見したので昇給待ったなし。

[tak4hir0]

AWS、S3の大惨事の原因を公開―ヒューマンエラーが発端だった | TechCrunch Japan

[silverscythe]

ジョーは失敗したのではなく、脆弱性を発見したのだ。

[marmot1123]

対策は大事なんだけど、年に4時間とか落としてしまうだけで厳しく詰られてしまうのは辛い。インフラって無茶苦茶大変なのに評価されづらいし、落とすと怒られて辛い/甘い話だが今日はインフラ落ちたから休日にしよう

[chintaro3]

「再起動をかけるとシステムは安全性のチェックとメタデータの整合性の確認を始めた。ところがこれは予想外に時間を必要とした。」

[sky-y]

Amazonの大規模クラウドサービス（AWS）の一部が4時間も停止した騒ぎ。停止した米ヴァージニアのサーバは主要（最も安い）で、一見無関係なアプリなども停止した模様。自ら推奨する冗長化の重要性を伝える皮肉的な事件

[renos]

数世紀後のAWS-AI「ヒューマンエラーこそ最後のバグつまり人間そのものがバグ…人は滅びねばならない」

[mmorita44]

レポートを読んだが、今回の事例に対する対策をきちんと提示していて好印象。もともとリカバリ対策を行っていたけど、今回は想定以上に復旧に時間がかかった様子。

[hrtsgt]

エラーを起こすのはいつでもヒューマン

[mukaer]

魔王（ヒューマンエラー）からは逃げられない！！

[moccos_info]

障害の連鎖を防ぐ仕組みがなかったのか

[petronius7]

これで全世界で慌て者扱いされるジョーかわいそう。

[kimikimi714]

こわい

[d6rkaiz]

“AWSは何年にもわたってダウンしたことがなく、従って全システムの再起動を行ったこともなかった。” 原文では言ってなさげ。

[betelgeuse]

「AWSは何年にもわたってダウンしたことがなく、従って全システムの再起動を行ったこともなかった」なるほどフラグ

[iktakahiro]

Joe's new role: AWS S3 (shutdown) Specialist.

[at_yasu]

“昼頃、AWSはサービスの復旧に全力を上げていたが、なにぶんシステムの規模が大きすぎた。AWSは何年にもわたってダウンしたことがなく、従って全システムの再起動を行ったこともなかった。”

[sawamura239]

ドキドキ過ごそう

[unagiga]

もしこの世界からGoogleとAmazonが消えたら。

[versatile]

落ちても戻るってわかったのがうれしい