タグ

2014年12月11日のブックマーク (2件)

  • Cloudera Manager API を使ったクラスタ構築 - Qiita

    Spark, SQL on Hadoop etc. Advent Calendar 2014 11日目です。 はじめに Hadoop クラスタの構築は手のかかる作業ですが、Cloudera Managerのようなツールを使えばかなりインストール作業は簡単になります。また、設定なども適宜デフォルトから推奨値に変えてくれたりするので便利です。 ただし、Cloudera ManagerのGUIを使うとインストールは非常に簡単になるのですが、それでも検証などのために環境の作成/削除を繰り返すといった場合、逆にGUI操作が自動化のネックになります。 Cloudera Managerはこの点も考慮していてAPIを公開してCUI処理で代替できるようになっています。 今回はこのCloudera Manager APIを使ったクラスタ構築の簡単なサンプルを紹介します。 前提 CentOS6.5がインストール

    Cloudera Manager API を使ったクラスタ構築 - Qiita
    daisukebe
    daisukebe 2014/12/11
    すごい趣味だな.. “下記のようにHIVEサービスにshiumachiとつけることも可能です”
  • マルチテナント環境でのHBaseの改善

    「HBase徹底入門」発売決定! O’ReillyのHBase(馬)も第2版に向けて執筆が進んでいるようですが、日でも、翔泳社から「HBase徹底入門」が発売されるとのビッグニュースがありました。(Amazonで予約が開始されたようです。発売日は2015/1/28)。楽しみですね。発売されたらじっくり拝読して勉強します! マルチテナントでのHBase さて、昨日のClouderaのブログに「New in CDH 5.2: Improvements for Running Multiple Workloads on a Single HBase Cluster」という記事が掲載されました。HBaseは現在 1.0.0版に向けて作業が進んでいます。(最新版は2014/12/10時点で、0.98.8と0.99.2) マルチテナント環境でHBase(やHadoop)を使用する場合、パフォーマン

    マルチテナント環境でのHBaseの改善
    daisukebe
    daisukebe 2014/12/11