bitlyでの分散システム構築から学んだこと

5月に開催されたBacon Conferenceで，bitlyのアプリケーション開発リーダのSean O’Connor氏は，毎月600億クリックを処理する分散システムの開発を通じてbitlyの開発者たちが学んだ，最も価値ある教訓について説明した。 分散システムとは何か？ 分散システムを定義する３大特性は，氏によれば，Wikipediaで簡単に見付けることができる。 コンポーネントノードの真の並行性。これによってノード間の同調に関連するコストと複雑性が発生する。 共通クロックの不在。このため，異なるノードで発生したイベントを時間順に並べることは不可能になる。 障害の独立性。これはノード障害がシステム内の他のノードに影響を与えない，という能力として理解されるべきだ。 従って分散システムの構築では，これらの特性を扱うことを目標にする必要がある。 ただし氏の意見として，システムの分散的特性に起因す

[Marukosu]

[特徴]

[tksmd]

bit.ly

[t-wada]

“抽象化によって隠ぺいしても、分散システムの特性が抽象化から漏出するのは時間の問題。システムの分散的な特質をモデル化して，それが外部に漏れても処置可能な抽象化が必要” 示唆に富んでいる

[sifue]

まあ関数型と非同期キューだよなぁ