こんにちは。 以下論文を読んでみようの続きで、今回は第4章です。 「Discretized Streams: A Fault-Tolerant Model for Scalable Stream Processing」 (http://www.eecs.berkeley.edu/Pubs/TechRpts/2012/EECS-2012-259.pdf) 内容としては、「System Architecture」ということで、 実際のシステムの構造を解説した章となります。 4. システムアーキテクチャ 私たちはD-StreamsをSpark Streamingという名称のシステム上に構築している。 Spark StreamingはSpark処理エンジンを拡張する形で作成している。 Spark Streamingは下図の3つのコンポーネントから構成される。 MasterはD-Streamsの系統