タグ

trainingとtroubleに関するmanabouのブックマーク (2)

  • minne の障害訓練(ミンドリ)のご紹介 - Pepabo Tech Portal

    あけましておめでとうございます。ペパボテックブログ 2019 年一発目の記事は minne 事業部チーフテクニカルリードの @_shiro16 がお送りします。 minne では定期的に障害訓練を行なっています。そこで今回はなぜ障害訓練を実施するようになったのか?や実際に実施してみて等のご紹介をしたいと思います。 はじめに 障害訓練の名前についてミンドリと名付ける事にしました。障害訓練の内容をテックブログに書こうと思っているんですがネーミングセンスが無なので困っていると社の Slack相談したところ @monochromegane が下記のような理由でミンドリという名前を提案してくれたので、採用させてもらいました。 経緯 minne にて sidekiq の特定の job の処理に時間がかかるようになり、一定時間の job を捌ける件数より積まれる件数が多く job の件数が増え続けこ

    minne の障害訓練(ミンドリ)のご紹介 - Pepabo Tech Portal
  • Redis の障害を想定した避難訓練を行いました - Pepabo Tech Portal

    こんにちは、EC 事業部のフロントエンドエンジニアのおいちゃん(@inouetakuya)です。先日、社内で Redis の障害を想定した避難訓練を行ったので紹介します。 背景 カラーミーショップ では、以前は Redis を利用していていましたが、ここ一年の間に用途が変わってきました。つまり、以前はコンテンツのキャッシュやセッションの保存先だったものが、いまでは非同期処理のためのキューとして使われるようになり、かつその処理には決済に関わるものも含まれています。 つまり Redis にダウンタイムが発生すれば、それがそのままビジネス面でのダメージに直結します。そこで Redis の自動フェイルオーバーを実現するため、インフラチームとともに Redis Sentinel の導入を進めてきました。 解決したい課題 Redis Sentinel を扱うのははじめてだったので、当初は「当に自動

    Redis の障害を想定した避難訓練を行いました - Pepabo Tech Portal
  • 1