こんにちは。 以下論文を読んでみようの続きで、今回は第4章です。 「Discretized Streams: A Fault-Tolerant Model for Scalable Stream Processing」 (http://www.eecs.berkeley.edu/Pubs/TechRpts/2012/EECS-2012-259.pdf) 内容としては、「System Architecture」ということで、 実際のシステムの構造を解説した章となります。 4. システムアーキテクチャ 私たちはD-StreamsをSpark Streamingという名称のシステム上に構築している。 Spark StreamingはSpark処理エンジンを拡張する形で作成している。 Spark Streamingは下図の3つのコンポーネントから構成される。 MasterはD-Streamsの系統
![Apache Spark Streamingの論文を読んでみます(4章 - 夢とガラクタの集積場](https://cdn-ak-scissors.b.st-hatena.com/image/square/ec0d4cc0fe081d6efece2bf710f6236892cfb999/height=288;version=1;width=512/http%3A%2F%2Fcdn-ak.f.st-hatena.com%2Fimages%2Ffotolife%2Fk%2Fkimutansk%2F20130929%2F20130929095652.jpg)