タグ

関連タグで絞り込む (1)

タグの絞り込みを解除

HadoopとHBaseに関するnobusueのブックマーク (5)

  • なぜApache HBaseを選ぶのか? #cwt2013

    1. DO NOT USE PUBLICLY PRIOR TO 10/23/12 なぜApache HBaseを選ぶのか? Headline Goes Here Jonathan Hsieh | @jmhsieh Speaker Name or Subhead Goes Here SoHware Engineer at Cloudera | HBase PMC Member November 7th, 2013, Cloudera World Japan 2013 2. 自己紹介 •  Cloudera: •  ソフトウェアエンジニア •  Tech Lead HBase Team •  Apache HBase commiRer / PMC •  Apache Flume founder / PMC •  ワシントン大学: •  分散システムの研究 2 11/7/13 Cloudera

    なぜApache HBaseを選ぶのか? #cwt2013
    nobusue
    nobusue 2014/07/12
    マルチテナント対応は0.98の次バージョンとのことなので、そろそろ採用してもよいかも。
  • 5分でわかる Apache HBase 最新版 #hcj2014

    Hadoop Conference Japan 2014 で発表した、HBaseの資料です。Read less

    5分でわかる Apache HBase 最新版 #hcj2014
  • 初めてのHBase一覧

    CodeZine編集部では、現場で活躍するデベロッパーをスターにするためのカンファレンス「Developers Summit」や、エンジニアの生きざまをブーストするためのイベント「Developers Boost」など、さまざまなカンファレンスを企画・運営しています。

    初めてのHBase一覧
  • HBase 0.96 で導入される新しいコンパクション「Exploring Compaction」 - 科学と非科学の迷宮

    Hadoopアドベントカレンダー2013、3日目を担当する @shiumachi です。 今回は HBase 0.96 の新機能を一つ紹介します。 要約 HBase 0.96 は賢くなったのでみんな使おう。 コンパクションのおさらい HBase では、Log Structured-Merge tree (LSM-tree) というデータ構造を使っています。 LSM-tree を簡単に説明すると、入力されたデータをログとメモリ上のデータストア(Memstore、メモリストア) に書き込みます。 メモリストアがいっぱいになると、まとめてディスクにフラッシュし、新しいストアファイルを生成します。 このストアファイルがたまってきたときに、少しづつ一まとめにしてなるべくファイル数を少なくするようにします。これがコンパクションです。 コンパクションを実行することにより、ファイルは一つにまとまります。こ

    HBase 0.96 で導入される新しいコンパクション「Exploring Compaction」 - 科学と非科学の迷宮
  • HBaseを止めるな! ~OKWaveの挑戦~ - はたらくコンピュータ

    2012-12-16 HBaseを止めるな! ~OKWaveの挑戦~ HBase Hadoop いまだにHBaseには怖くて手が出せてないんですが、12/10のHadoopソリューションセミナー@東京カンファレンスセンター品川でのOKWaveさんの事例紹介が素晴らしかったのでご紹介します。この発表を聴いていたら「何とかなるんじゃないか?」という気がしてきました。まず気を付けるポイントは以下の4点 1. リージョン自動分割はしない デフォルトではリージョンが一定サイズを超えると自動分割が走ってしまい、分割中はリージョンにアクセスできなくなる。リージョンは事前に分割しておいて、自動分割閾値を極端に大きい値にしてリージョン自動分割を走らせない方が良い。 2. メジャーコンパクションを走らせない デフォルトでは24h±20%毎に走るけれどもこれだと影響が大きくなってしまうので、そうなる前にこまめに

  • 1