Cloudera Managerのリソース管理機能を使いこなそう - DMM.comラボエンジニアブログ

Cloudera Manager Advent Calendar 2015の23日目です。 こんにちは、DMM.comラボ ビッグデータ部所属のしょうちゃんです。 Cloudera Managerのリソース管理機能について書きました。 はじめに DMM.comラボでは、CDHを利用しHadoopクラスタを運用しています。 Hadoopを運用する上で、課題の1つにリソースの管理が挙げられるでしょう。 リソース管理課題の例としては、 アドホックな分析処理のために定常処理を阻害したくない 時間帯に応じてサービスごとに使えるリソースを動的に管理したい etc... などが挙げられるでしょう。 そこで今回は、同じクラスタの中で複数サービスを動かす際の Cloudera Managerを利用したリソース管理に関してDMMでの事例を紹介させていただきます。 ※ 本記事執筆時点でのCloudera Man

[hiroomi]

“昼はアドホックな集計に最適なリソース配分 夜はバッチに最適なリソース配分”

[daisukebe]

有用記事だ