Apache Kafkaに関するnagaitakeyukiのブックマーク (2)

  • Java Clientで入門する Apache Kafka #jjug_ccc #ccc_e2

    1. Copyrig ht © 2017 Yahoo Japan Corporation. All Rig hts Reserved. 2017年5月20日 1 ヤフー株式会社 データ&サイエンスソリューション統括部 データプラットフォーム部 開発4部 パイプライン 森谷 大輔 Java Clientで入門する Apache Kafka JJUG CCC 2017 Spring 2. Copyrig ht © 2017 Yahoo Japan Corporation. All Rig hts Reserved. 自己紹介 • 森谷 大輔 • インフラエンジニア • どちらかというとBEアプリケーション開発 • ヤフーのデータパイプラインをつくったり運用したり • 対外発表 • ストリーム処理プラットフォームにおけるKafka導入事例 (Apache Kafka Meetup Japan

    Java Clientで入門する Apache Kafka #jjug_ccc #ccc_e2
  • Apache Kafka入門 - 技術メモ

    Kafka Kafka Kafka の概要 何ができるのか LinkedInが実現したかったこと 実現方法 背景(Kafka誕生前のプロダクト) メッセージキュー ログ収集 ETLツール メッセージングモデル キューイングモデル Publish-Subscribeメッセージモデル Kafka のモデル データのディスクへの永続化 分かりやすいAPIの提供 送達保証 At Least Once Exactly Once Kafka のユースケース データハブ ログ収集 Webアクティビティ分析 IoT イベントソーシング Kafka の特徴 参考書籍 Kafka の概要 Kafka は大量のデータを「高スループット」かつ「リアルタイム」に扱うためのプロダクト 何ができるのか 複数サーバによるスケールアウトが可能 受け取ったデータをディスクに永続化可能 連携できるプロダクトが多く存在するため、

    Apache Kafka入門 - 技術メモ
  • 1