Apache Kafka
You're viewing documentation for an older version of Kafka - check out our current documentation here. Documentation Kafka 0.8.0 Documentation for the 0.7 release is here. 1. Getting Started 1.1 Introduction 1.2 Use Cases 1.3 Quick Start 2. API 2.1 Producer API 2.2 High Level Consumer API 2.3 Simple Consumer API 2.4 Kafka Hadoop Consumer API 3. Configuration 3.1 Broker Configs 3.2 Consumer Configs
Monitoring Kafka performance metrics
Product { this.openCategory = category; const productMenu = document.querySelector('.product-menu'); window.DD_RUM.onReady(function() { if (productMenu.classList.contains('show')) { window.DD_RUM.addAction(`Product Category ${category} Hover`) } }) }, 160); }, clearCategory() { clearTimeout(this.timeoutID); } }" x-init=" const menu = document.querySelector('.product-menu'); var observer = new Muta
Apache Kafka について | ギャップロ
Kafka と ZooKeeper ZooKeeper の詳細 ZooKeeper は、分散アプリケーションのためのオープンソースの分散コーディネーションサービスです。ZooKeeper は Java で動作し、Java と C のためのバインディングが用意されています。 クラスタ (マルチサーバー) セットアップ ZooKeeper は奇数単位でアンサンブルと呼ぶクラスタを組みます。アンサンブルの過半数が動作している必要があるので、奇数台のマシンを使うのがベストです。たとえば 4 台のマシンを使う場合、ZooKeeper が対応できるのはマシン 1 台の障害までです。2 台のマシンに障害が発生すると、残りの 2 台では過半数にならないためです。5 台のマシンを使えば、ZooKeeper はマシン 2 台までの障害に対応できます。 その中の 1 台がリーダー選挙を通して全ての書き込みを調停
Confluent Platformの各コンポーネントの特徴 - Qiita
こんにちは。 前回Confluent Platformの全体概要を見たので、次は各コンポーネントの特徴を見ていきます。 ただ、既に概要の時点でどんなものかは書かれているため、各トピックや各コンポーネントごとに特徴的な内容をまとめるにとどめます。 また、ある意味わかりやすいCamusやProactive Supportは省略します。 データのシリアライズ革命 JSONフォーマットはよくつかわれているが、下記のように2つ欠点がある。 1. JSON自体にフォーマットを仕込むと各フィールドに形式を付記する必要があるため冗長 2. 構造定義なしでデータを投入するとデータが欠けたり変なのが加わったりするので危険 データスキーマの問題を解消するため、最近はThrift、Protocol Buffer、Avroといったスキーマ定義言語がある その中では、スキーマが今後変わることを考慮した機構を有するAv
Kafka を知るための情報源
Sep 07, 2015 ここ半年ほどずっと Kafka の大規模クラスターに関っていたりします。自分が Kafka を知るために読んだドキュメントやら資料などもだいぶたまったので、このあたりで一度整理をして、メモ代わりにここに残しておこうと思います。 公式ドキュメント Kafka の公式ドキュメントはとてもよく書かれているので、非常に有用です。何度読んでも新しい発見があるぐらい詳細に書かれているので、自分は印刷したものを手元に用意して、困った時などに見直すようにしています。他にも一部古い情報が混じっているので注意が必要ですが、Wiki や FAQ のページも有用です。 Kafka Documentation Kafka Wiki Kafka FAQ ソースコード ソースコードは Apache の Git リポジトリにあります。GitHub にもミラーされているので、自分はこちらで参照する
スキーマつきストリーム データ処理基盤、 Confluent Platformとは？
2. アジェンダ 1. Kafkaを組織で使うと何が困る？ 2. Confluent Platformとは？ 3. どんな構成になっているの？ 4. どうスキーマを定義できる？ 5. まとめ：導入するとどう使えるの？ 1
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
How to enable remote JMX on Kafka brokers (for JmxTool)?
jmxterm quickstart - Apache Kafka - Apache Software Foundation
https://docs.confluent.io/platform/current/kafka-rest/docs/config.html
Confluent Platform | Confluent Documentation
SSSSLIDE