こんにちは。 皆さん、Apache Kafkaは使っているでしょうか? 最近はHadoop、Sparkの他Storm、Spark Streaming、Flink、Gearpumpのようにストリーム処理系プロダクトとペアで使われることが多く、リアルタイムな処理を行う場合にはかなりつかわれるプロダクトになってきていると思います。 ですが、実際に使ってみると困ることもあるわけでして・・・ で、それを解決できる可能性があるConfulent Platformというプロダクトが出ていました。 ですので、それを追ってみることにします。 参照: http://docs.confluent.io/2.0.0/platform.html Confluent Platformとは? Confluent Platformとは、毎秒大量のデータが到達する事業環境を整理し、管理可能なストリームデータ基盤。 Conf