Amazon Managed Streaming for Apache Kafka (Amazon MSK) | AWS Big Data Blog
AWS Big Data Blog Category: Amazon Managed Streaming for Apache Kafka (Amazon MSK) Near real-time streaming analytics on protobuf with Amazon Redshift In this post, we explore an end-to-end analytics workload for streaming protobuf data, by showcasing how to handle these data streams with Amazon Redshift Streaming Ingestion, deserializing and processing them using AWS Lambda functions, so that the
HDInsightのKafkaをJolokia（REST API）でモニタリングしてみる。
はじめに くどうです HDInsightをモニタリングしたい場合、Ambari UIを利用すると非常に便利です。 しかし、KafkaについてはAmbari UIでモニタリング出来る項目が少なく別の方法を検討する必要があります。 その一つとして、Jolokiaを利用した方法を紹介します。 Jolokiaとは Jolokia https://jolokia.org/index.html JolokiaはJMXの情報を収集し、HTTP REST APIとして返答できるAgentです。 Agentは一つではなく下記が用意されています。 1,WAR Agent for deployment as web application in a JEE Server. 2,OSGi Agent for deployment in an OSGi container. This agent is packag
Apache Kafkaで、クラスタメンバーの増減とPartitionの再割り当てをやってみる - CLOVER🍀
Apache Kafkaでクラスタのメンバーの増減や、Partitionの再割り当てみたいなことをやってみたいなぁと思い、ちょっと 試してみることにしました。 環境 Apache Kafkaのバージョンは、0.11.0.1とします。 また、Apache ZooKeeper、Apache Kafka（Broker）のIPアドレスは、次のようなものとします。 Apache ZooKepper … 172.21.0.2 Apache Kafka … 172.21.0.3〜 Apache KafkaのBrokerのIDは、IPアドレスの末尾とします（172.21.0.3なら、3）。 これで、Apache KafkaのNodeを増減させたりして、どのようになるかちょっと見てみたいと思います。 メッセージ投入用のプログラム Apache Kafka（Broker）へのメッセージの投入には、Javaで書
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
David's System Admin Notes: Installing Apache Kafka and Zookeeper CentOS 7.2
Apache Kafka Connect MQTT Source Tutorial | HowToProgram
