例のデータ消失したサーバの件で思うこと - 蟻の実験工房（別館ラボ）

例のデータ消失したサーバの件、色々と被害も出ているようですが 一応、いくつか運用保守も担当している立場からの意見です。 たとえばあなたが現場の運用保守担当であったとして、以下の条件で作業を任されていたとします。 １．稼動系と待機系のサーバ構成である ２．待機系のスナップショット等の二次バックアップは無し （待機系のみが稼動系の唯一のバックアップ） ３．本番環境は複数台のサーバペアだが、検証環境は１ペアのみ ４．本番環境と検証環境の違いのため、検証終了後に更新プログラムの 一部を修正しないといけない ５．更新プログラムの適用は稼動と待機と同時に更新をかけるよう 強いられている。 もしくは同時に更新する事のリスクが上層部と共有出来てない。 ６．更新プログラムの適用作業において手作業が発生するが体制上１人で 実施しないといけない ７．体制強化やサーバ増設など提案できる立場にない、もしくは 提案し

[itochan]

やっぱり５番が最大の問題だと思うなー。それさえなければとりあえずなんとかなったと思うし。

[reachout]

「消えるかもしれないからお客様でも万が一には備えてくださいね！」という注意を怠っていたことが今回の一番クソなところではないだろうか

[FTTH]

https://twitter.com/FTTH/status/217408025651191809

[houyhnhm]

バックアップ担保やリストア担保全く書かれてなかったので、客もファーストサーバもこの事態を想定していなかったのかと不思議に思ってる。

[rryu]

「ミスなく」というよりは「ミスした時に重大な事故を起こさずに」だと思う。保守作業時に一つもミスを起こさなかったというのは幸運なことで、そして幸運はいつまでも続かない。

[pc4beginner]

>運用保守をやる現場担当であれば当然そのリスクは認識出来ているはずです。　経営判断という便利な言葉があり、これがシステムを簡単に殺します。経営判断は現場では行いません。だからこそ経営者は現場を知る（略

[nanoha3]

バックアップ向けの保険ってどうだろ。データ消失したらXXXX万円まで保障っていう。一斉に障害が起こるから無理か。

[s_kuroi]

中間報告では毎朝6時の（自動）バックアップによる巻き戻り（？）のリスクだけが同時更新の理由になっていたけど、それだけで同時更新のリスクを担保していたとはちょっと思えないんだよなー。

[indication]

事故の発生手順について

[invent]

例のデータ消失したサーバの件で思うこと - 蟻の実験工房（別館ラボ）

[hiroomi]

「手作業が発生するが体制上１人で 　実施しないといけない」何人人が張り付いてもリスクの回避にならない。気合でがんばれ！！