Apache Sparkの導入検証を行いました －アプリ検証編－ - Platinum Data Blog by BrainPad

皆さん、こんにちは。マーケティングプラットフォーム本部で広告系製品の開発を担当している、田崎と白井です。 今まで2回にわたり、新たな分散基盤である「Apache Spark（アパッチ スパーク）」に関して、概要や弊社で実施したパフォーマンス検証について説明させていただきました。 ・第1回「Apache Sparkの導入検証を行いました －基礎編－」 ・第2回「Apache Sparkの導入検証を行いました －パフォーマンス検証編－」 最終回である今回は、Spark Streamingを使ったサンプルアプリケーション開発とその検証について、皆さんにスライドでご紹介したいと思います。 今回行った検証では、「Apache Kafka（アパッチ カフカ）」経由でアクセスログを取得し、そのログを用いてユーザーがコンバージョンするかどうかを予測する、というアプリケーションを作成しました。 スライドの内