Facebookが何千台ものMySQLを人手を使わず自律管理する仕組み「MySQL Pool Scanner（MPS）」

おそらく世界でもっとも大規模にMySQLのクラスタを展開し、運用しているのがFacebookでしょう。複数のデータセンターにまたがり何千台ものMySQLサーバを運用するために、自動化の仕組みは欠かせません。 その自動化がどのような仕組みになっているのか。FacebookのデータベースエンジニアであるShlomo Priymak氏が、Under the hood: MySQL Pool Scanner (MPS)という記事をFacebookで公開しています。 かなり長い記事なので、ここではそのポイントをまとめて解説してみました。詳細はぜひ原文をあたってみてください。 MPSのおもな3つの機能 Facebookで稼働しているMySQLは、つねに1つのマスターとそこからレプリケーションされた複数のスレーブによるレプリカセットを構成しています。このレプリカセットの構造を維持し続けることで、可用性と

[Mono_Book]

この仕組みを自前で作れなくてSQL Serverのマスターマスター構成に移行した。

[takc923]

あったらいいなこんなシステム

[mitsugi-bb]

Facebook以外も大手は同じような仕組みなんだと思う。amazonとかキッティングまで自動化してたりして・・・・んなわけないか。

[raitu]

Facebookが複数のデータセンターにまたがり何千台ものMySQLサーバを運用する上で、サーバを集団的自律させて自己復旧させてるって話

[tmatsuu]

すげえな。気になったのは「毎日何百回、何千回と人手を介すことなく迅速かつ安全に実行している」の部分。そんなにサーバ落ちるのか。

[stibbar]

> FacebookのMPSは、複数のインスタンスからなるMySQLのクラスタをコロニーとして捉え、全体として自律的に振る舞うような知性を与える仕組みのように見えます。 コンピュータはより高い並列性を持たせることで性能を向上

[tarchan]

＞並列なコンピュータのコロニーに対して集団的知性を持たせることが非常に重要な要素の1つである

[dk19810313]

すげー

[d_akatsuka]

すごいな

[masaruyokoi]

あぁスペアを自動昇格させるってことね。その部分の自動化が何かしらのミドルウェアで1発設定できないから、きっと作りこんだんだろうなぁ。

[Chisei]

読んだ

[gorimaru7]

おそらく世界でもっとも大規模にMySQLのクラスタを展開し、運用しているのがFacebookでしょう。複数のデータセンターにまたがり何千台ものMySQLサーバを運用するために、自動化の仕組みは欠かせません。

[a2ikm]

いいなあ。楽したいなあ

[d-kotani]

この仕組みおもしろい

[tohima]

すごいなあ、想像するだけでワクワクする。映画みたい。

[kiki73ki348]

fb始めてみたいです

[masaya-chonan]

「一匹の蟻はあまり知性を持っているように見えませんが、蟻の集団であるコロニーにはそれを上回る集団的知性があるのではないかと考えた昆虫学者がいたそうです。」

[rishida]

おそらく世界でもっとも大規模にMySQLのクラスタを展開し、運用しているのがFacebookでしょう。複数のデータセンターにまたがり何千台ものMySQLサーバを運用するために、自動化の仕組みは欠かせません。 その自動化がどの

[shiwork]

これを実現する為にどういうProjectと体制で取り組んだのか知りたいっすね☆ / Facebookが何千台ものMySQLを人手を使わず自律管理する仕組み「MySQL Pool Scanner（MPS）」 － Publickey

[UDONCHAN]

すごい

[jun_ya]

このシステム、どこの部分が人出を要するか気になる

[utsuidai]

MySQLガチ

[kukita]

【MySQL】Facebookの何千台ものMySQLを自律管理する仕組みについて。「スレーブが落ちたとき…インスタンスを作り…新スレーブ」「マスターが落ちたとき…レプリカの1つをマスターに昇格」「この2つの操作は完全に自動化」

[unyuunyuho]

Facebookが何千台ものMySQLを人手を使わず自律管理する仕組み MySQL Pool Scanner MPS Publickey

[ftype]

何千台のMySQLとか頭おかしくなりそう

[m_shige1979]

構成組むの結構大変そう

[sifue]

こういうの作らないとやってられないだろうなあ...

[kunipon]

Facebookが何千台ものMySQLを人手を使わず自律管理する仕組み「MySQL Pool Scanner（MPS）」 おそらく世界でもっとも大規模にMySQLのクラスタを展開し、運用しているのがFacebookでしょう。複数のデータセンターにまたがり何千台もの

[kana321]

Publickey

[bouzuya]

RDSのMultiAZである程度できるんだね。