はてなブックマーク

事象 ソーシャルサービスを運用して1年くらいになるのですが、ある日突然デザイナから 「なんかサービス遅くないですか？」と言われサイトを開くとすこぶる遅い！ アプリケーションを調べているとEC2からElasticacheへのアクセスでタイムアウトが 起きていることが分かりました。 そいでCloudWatchでメトリクスを見ているとプライマリサーバが SwapUsage の値が急激に増加していることが確認出来ました。 しかーし、とにかくそういったものはAWSに任せて突き進んできたものですから どーしよ、どーしよとなっていたところセカンダリサーバがプライマリに昇格して 復旧となりました。この間、30分ほどです。 原因 reserved-memoryを設定していなかったこと 上記が原因でした。 これを設定しないとインスタンスのメモリをRedisですべて使い切ってしまう(maxmemory=rese