「障害に捨てるところなし」というお話をしました - Cybozu Inside Out | サイボウズエンジニアのブログ
どうも！アプリケーション基盤チームの@yokotasoです。 3月11日にBattle Conference U30 というイベントでお話をさせていただきました。 準備がてら作成したディスクリプションを公開します。 キーノートはSpeakerDeckからどうぞ!こちらも参考にしていただければ、嬉しい限りです。 では、どうぞ！ 障害にすてるところなし サイボウズ株式会社の横田です。 「障害に捨てるところなし」というタイトルで少しお話させていただきます。お手柔らかによろしくお願いします。 運用障害の話 まずはじめに、今回のお話をするにあたりまして 運用障害でご迷惑をおかけしたみなさま、大変申し訳ありません。 より快適に利用いただけるサービスを目指しまして、対策・改善をおこなっております。 これからも、弊社製品をよろしくお願いいたします。 クラウドの規模と稼働率 障害の話をする前に、サイボウズの
Amazon S3ダウンの原因、コマンドの入力ミスで多数のサーバを削除。サブシステム再起動に時間がかかり障害が長引く。AWSの報告を読み解く
AWSの米国東部リージョン（US-EAST-1、バージニア北部）において2月28日に発生したAmazon S3の障害の原因と対策などについて、AWSが報告を公開しました。 Amazon S3がダウンした直接の原因は、Amazon S3課金システムのデバッグ作業中に入力したコマンドのミスによって多数のサーバが削除されたことでした。また、それによって引き起こされたサブシステムの再起動に時間がかかったことが、障害を長引かせる要因になっています。 この記事ではAWSの報告内容を整理し、発生した出来事を時系列でみたあと、障害の背景にあった技術的な要因と対策を紹介します。 コマンドの入力ミスで多数のサーバを削除、復帰にも長時間かかる そもそもの障害の発端は、Amazon S3課金システムの処理速度が想定よりも遅くなっていたため、Amazon S3チームがデバッグ作業を行っていたことでした。 2月28日
GitHubが1月28日のサービス障害の詳細を公開。停電により内部のChatOpsシステムも落ちて初期対応が困難に。Redisクラスタの復旧に時間
GitHubが1月28日のサービス障害の詳細を公開。停電により内部のChatOpsシステムも落ちて初期対応が困難に。Redisクラスタの復旧に時間 報告では、サービス障害はGitHub社内のChatOpsシステムも巻き込んで初期対応に時間がかかってしまったこと、一時的な停電がRedisクラスタの障害を引き起こしたため、その究明と復旧が作業の主な部分だったことなどが説明されています。 報告の要点をまとめました。 内部のChatOpsシステムも障害に GitHubのサービス障害は、すでに報告されているように、自社データセンターにおける一時的な停電が最初の原因でした。 At 00:23am UTC on Thursday, January 28th, 2016 (4:23pm PST, Wednesday, January 27th) our primary data center experi
「聞こえないこと」の意味を理解するために
NHK@首都圏 @nhk_shutoken 【ニュース】佐村河内氏が診断を受けた「感音性難聴」という障害について、日本耳鼻咽喉科学会の八木聰明理事長はＮＨＫの取材に対し「内耳に伝わった音が情報として神経を通して脳にうまく伝わらない障害で、先天性のものもあるがほとんどの場合、原因が不明だ」と話しています。（続く） #nhk NHK@首都圏 @nhk_shutoken 【ニュース】（続き）また一般的な症状については「難聴の程度にもよるが音が聞こえたとしてもひずんでしまったり、音がしているのは分かるものの、相手が何を言っているのか分からないといった症状は起こりうる」と話しています。 http://t.co/KcniGYNlqv #nhk NHK@首都圏 @nhk_shutoken 【ニュース】（続き）一方で、佐村河内氏が会見で公表した新たな診断書の結果については「この程度の難聴であれば比較的静か
エンジニアなら知っておきたい障害報告&再発防止策の考え方 - Qiita
システムには障害がつきものです。どんなにしっかりと作られたサービスであっても思わぬところで、バグやミスが発覚して、トラブルになるものです。大事なのはこういった障害を次への糧にしていくこと。失敗というのは大事な資産なので、管理できるようにしましょうという話。 あわせて読みたい あきらめるにはまだ早い！ソースコードの品質向上に効果的なアプローチ メンタリングの方法について基礎をまとめました。内心でなく行動を変えることが障害報告とも共通します。 新入社員が来てメンターになれって言われたけど、どうすればいいのかという対話テクニック 半年で40kg痩せた！ダイエットでわかるリーンなプロジェクトマネジメント手法 心理的安全性ガイドライン（あるいは権威勾配に関する一考察） 障害の種類と障害報告について 障害には、小さなもの、たとえば画面に表示されているテキストの乱れから、すべての画面で50xエラーが発生
最重度の知的障害をもつ、姉のことを書いてみようと思う。 - 体調わる子の毒吐きブログ
2013-10-14 最重度の知的障害をもつ、姉のことを書いてみようと思う。 日常 学生時代 お金 家庭 世の中 先日、マクドナルドで知的障害児かな？って感じの１０歳ぐらいの子が暴れていた。 「あー！」とか「うー！」とか大きな声で、何かを訴えているようだった。 それを、その子のお母さんっぽい人が「美味しいんだ！よかったね！」とニコニコしながら語りかけていた。 おいらは、「あー、すごいなあ。１０年もの間、大変だったろうに。それなのにこんな仏の心で接してきたんだなー」と思った。 でも、帰り際に見たらそのお母さんだと思ってた人は、ヘルパーさんだった。 なんかネームプレートを首からぶらさげていた。 「まあそうだよなあ」と思ってしまった。 というのも、おいらの姉は最重度の知的障害。 知能は３歳児ぐらいのレベルしかないらしい。 子供の頃はよくおいらも養護学校とかに行って、知的障害の子の母親たちを見てき
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
TechCrunch
fluentdでログが欠損する可能性を考える : sonots:blog