タグ

関連タグで絞り込む (2)

タグの絞り込みを解除

yarnとcdh4に関するkimutanskのブックマーク (2)

  • CDH4 LogPath and LogLevel Configurations | 外道父の匠

    Hadoop実践シリーズの続きで、地味ながら重要な所をいきます。 CDH4+YARNの運用において、どのログを見れば良いのか、ログレベルはどのように設定するのか、というなんとも痒いところに手が届く孫の手編となります。 はじめに 件に関連して、前回の外道式設定を若干更新してあります ここではログレベルをWARNとしています 各ノードのログ デーモンとしてのログで、HDFSとYARNに分かれてます。 ログ保存パス /etc/hadoop/conf/hadoop-env.sh

    CDH4 LogPath and LogLevel Configurations | 外道父の匠
    kimutansk
    kimutansk 2012/09/08
    CDH4を扱う『斬新なブログ』のために。。。とさすがですw
  • CDH4 Configurations with YARN, Capacity Scheduler and Hive | 外道父の匠

    CDH4 Configurations with YARN, Capacity Scheduler and Hive 前回の続きで、私がCDH4で利用している外道式設定ファイルの紹介です。 非常に手間暇かけて作成したものなので墓の下まで持って行きたいところですが、某所からの圧力と社会のために、恥ずかしながら放出したいと思います。 はじめに 言うまでもなく、参考・利用においては自己責任でお願いします ホスト名・ファイルパスは適当に変換してください descriptionの日語は私のメモですので怪しかったらググってください 英文のみの場合はまだ未検証だったり説明するまでもないものになっています 2ヶ月以上これで運用していますが、まだまだ変わると思うので更新日付を書いておきます ファイルはUTF-8です Hadoop設定 CDH3からCDH4への設定変更リスト core 公式 core-def

    CDH4 Configurations with YARN, Capacity Scheduler and Hive | 外道父の匠
    kimutansk
    kimutansk 2012/09/06
    こ、これは・・・みましょう。普通こういうの出してくれないですよね。凄いです。
  • 1