こんにちは、アスクルの いのだい です。 現在はLOHACOのエンジニア組織の部長職に就いていますが、元は運用エンジニアのチーム(以後、運用チーム)に所属してリリース作業などの運用業務を行っていました。そんな私が運用チームに所属していたときの失敗談を書きます。このお話を通して、同業の皆様が同じ過ちを繰り返さないような糧になれば嬉しいです。 !少々刺激の強い内容が出てきますのでご注意ください! 事故概要 発生日時:2016年8月16日 17時15分 復旧日時:2016年8月29日 5時00分 事象 :オペレーションミスによるOracleデータベース破損 事故の経緯 時は2016年の夏、大型案件の開発が進行中でした。運用担当である私は、当時まだローンチされていない本番環境でOracleデータベースのメンテナンスを行っていました。開発環境と本番環境でOracleの環境差異があったため、本番環