Webサーバログ転送・ストリーム処理系私案 - たごもりすメモ 37 users

HTTPアクセスログをHiveが読める書式への変換やその他必要なデータ変換などストリーム処理で行いつつ転送して最終的にHDFSに時間ごとに書き込むぜー、というシステムを作ってる途中なんだけど、だいたい部品が揃いつつあるところでいったんまとめて書き出してみ... 続きを読む

• tagomoris.hatenablog.com
• テクノロジー

• con_mame hadoop, サーバ, ログ, scribe, fluentd, ログ解析
  2011/12/01