Amazon OpenSearch Serviceのデータが全消え＆ダッシュボードにログインできなくなりました - ecbeing labs（イーシービーイング・ラボ）

こんにちは。ReviCo[レビコ]開発チームの金澤です。 本年も当ブログは細く長くを目標に続けていきますのでよろしくお願いします。 今回は、昨年末にOpenSearchが破損した事件についてまとめようと思います。 OpenSearch破損… 当時の構成と事象 構成 事象 AWSサポートからの回答 復旧について 教訓：OpenSearchはシングルノードで動かしちゃあかん… おわりに OpenSearch破損… 去る2023年12月25日、我が家の子どもたちも無事にサンタさんからプレゼントを受け取り、今年もあと1週間かぁと思いながら出社すると、開発環境のOpenSearchがぶっ壊れていました…。 ドキュメントがごっそり消えてる… 当時の構成と事象 構成 t3.small.search インスタンス シングルノード 事象 プログラムからOpenSearchに接続できなくなった ダッシュボード

[tmatsuu]

シングルノードはダメ。でもこれ複数台構成にしてもRAIDの冗長構成と同じで完璧はないので、スナップショットからのリストア手順の確立をしっかりやっておきたいところだ。

[bopperjp]

んー、本番のDBをシングルノードで運用する方が度胸ある。

[Falky]

そらまあそやろ。