タグ

flumeに関するmanabouのブックマーク (2)

  • Apache Flume - Architecture of Flume NG

    Apache Flume is a distributed, reliable, and available system for efficiently collecting, aggregating and moving large amounts of log data from many different sources to a centralized data store. Flume is currently undergoing incubation at The Apache Software Foundation. More information on this project can be found at http://incubator.apache.org/flume. Flume NG is work related to new major revisi

  • Flume

    1. Flume について (“Flume Reliable Distributed Streaming Log Collection” by Jonathan Hsieh, Henry Robinson, Patrick Hunt ; http ://www.cloudera.com/resource/flume-reliable-distributed-streaming-log-collection-hsieh-robinson-hunt の非公式かつ不完全な日語訳です。 ) Infoscience 永江 哲朗 2. シナリオ ・シチュエーション :   - ログを生成するサービスがデータセンターに数百個ある。   そのサービス群は解析したいログを大量に生成する。   - 大量のデータを処理する Hadoop システムを使っている。 ・問題 :   - すべてのログを Hadoop

    Flume
  • 1