タグ

関連タグで絞り込む (1)

タグの絞り込みを解除

haroopに関するu_engineのブックマーク (1)

  • HDFS・YARNの完全分散クラスタを構築する - Qiita

    Outline HadoopのYARN上で色々なアプリを動かすことになったのでテスト環境を作ってみた。 基的な動作確認は擬似分散モードでいいはずだが、nodeを増やしたり別ホストにnodeを置いた状態でのテストをするために構築してみた。 環境 共通設定 OS: Ubuntu14.04 (AWS EC2) ユーザー: ubuntu VPC: 全マシンは同一subnetに配置 IP: PublicIPとPrivateIPのどちらも使用。 Hadoop 2.5.2 port: 全開放(22, 80, 8020, 8032, 8088, 50070が開いてればたぶん大丈夫) マシン・役割 client 自分のメインマシン。 主にsshで各ノードを操作したり、PublicIP経由で接続を確認したりする。 master Namenode/ResourceManager用 node1 datanode

    HDFS・YARNの完全分散クラスタを構築する - Qiita
  • 1