本当は怖いMemcached - Qiita

はじめに データアクセスの高速化、セッションの保持などに非常に重要なポジションを占めているMemcached 特徴をあげると、速い安い美味いで、AWS上のサービス化などされており、非常に扱いやすいプロダクトなのですが、Memcachedそのものが単一障害点とならないように冗長化を測った時に深刻な問題が発生する可能性があることをご存知でしょうか。 システムに心あたりがある方は今すぐ代替手段を検討しなければなりません。 どうしてもMemcachedを使いたいという方はこちらへ それでもMemcachedを使いたいあなたへ 前提条件 そもそも冗長化をしなければ問題ないという運用はその時点で怖いのでNG cache機構という性質上、データが飛ぶのは問題ない(”正”となるデータを他から読み出すだけ)が、誤ったデータが読み出されるのをNGとする Memcachedを利用した時に利用ノードを決定するのは

[haru666]

なんか勝手に性能限界を超えた利用してキレてるという逆恨みめいたものを感じて怖いんですが。memcachedを冗長化してそのデータを更新にまで直接利用したいというのが、間違っている気がするのは僕だけなんですかね。

[dekokun]

ノードの一部で障害が起きる->別のノードが使われる->障害復旧->復旧ノードには過去のデータが残っている->expireに達するかデータが書き換えられるまで死 というお話及び代替策。

[naga_sawa]

擬死問題/高負荷時に一時的に応答遅れて死んでる判定しちゃう問題は分散系ではあるある問題/本当に死んでくれたらクリアされるのでまだマシなんだけども/応答処理が閾値越えた場合は自発的にクリアするのが妥当？

[oranie]

復旧ノードを自動的にプールに戻さなければ良いのでは？

[yuki_2021]

tokyocabinetを使うんであればkumofsという手もありますぜ。実験した感じではKyotoTycoonよりも複数台サーバでのレプリケーションでは高速に動いた。

[dorapon2000]

“障害ノード上のデータは更新前の古いデータが残っているため、データ不整合となる。”

[ZuiUrs]

“cas”

[stumsky]

怖い…。 KyotoTycoon - 本当は怖いMemcached by @tarupachi on @Qiita

[kuenishi]

典型的なSplit-Brainのシナリオなので、Jepsenをパスするデータストア（ZooKeeperとかそういうの）じゃないと厳しいと思いますよ。

[masutaka26]

Memcached vs Redis vs KyotoTycoon

[rochefort]

[[kyototycoon]そうなんですよね。spofになりがち。自分も調べました。

[igrep]

“ElastiCacheとして提供されており、一時キャッシュの共有にはお手軽だが、冗長化したい場合はかなり注意が必要なので強くはお勧めしない。”

[anoworl]

コメント欄もおもしろい / また同じようにコメントしようとしたら既に書いてた

[longroof]

真夏のクラスタ間データ不整合(；´Д｀)

[msykt]

Redis Sentinelの完成度が気なってる

[nari_ex]

素晴らしいまとめ

[nekoruri]

ノード自体は死なないネットワーク障害による一種のスプリットブレイン問題だけど、LBとかに振り分けを任せて自動復旧させないとかが手軽だと思う。

[tmatsuu]

なるほど確かに。 丁度昨日repcache調べていたもののrepcacheのWikiが全滅で死ねた。あとはGREEさんのFlareとかどうですか。

[atijusts]

memcached.sess_remove_failedかMemcached::OPT_AUTO_EJECT_HOSTSかでサーバを自動で外したり復帰したりするような設定にしてないと、こういうことにはならないと思うので、普通に使うぶんには気にしないでいいんじゃないかな。

[shinagaki]

flareとかkumofsとかは最近使わんのかな

[taguch1]

cacheだし

[ya--mada]

諦めが肝心

[Rinta]

「本当は怖い冗長系運用」の間違いだと思う。システム運用中に脱落した冗長系を運用中に現用に戻すには高度な作り込みと運用が必要。AWSはノードが復旧する時勝手に現用になるのかな？

[YukeSkywalker]

クリティカル過ぎるとこには使いづらいと言うお話

[potato777]

Memcached が単一障害点になる時点で怖い ((ﾟДﾟ；))ｶﾞﾀｶﾞﾀ / "Memcachedそのものが単一障害点とならないように冗長化を測った時に"

[meganemegane103jp]

Memcacheの冗長化が難しいという話。あんまり「冗長化しないと危ない」という箇所には使わないほうが良いのでは。。。と思ったのです

[taruhachi]

Memcachedは安い旨い早いだけと思ってたら冗長化を試みたとたんに牙を向くというお話。

[delico69]

怖いわ。

[asuka0801]

repcachedってKLabが開発してたのね