タグ

2016年1月19日のブックマーク (1件)

  • [Hadoop]Hadoop 擬似分散(Psuedo-distributed)モードの設定 | Nobwak's Lair

    Standaloneモードでは、複数のホストを使った処理は行わない。デーモンも動かさない。 しかしHadoopは分散処理をしてナンボである。 分散処理をする場合には、複数のホストでいくつかのデーモンを動作させる必要がある。 それはまあ当然。 ただ、いきなり複数ホストを使うのはハードルが高い。 そこで、「Hadoopは複数ホストで動いているつもりだけど実際は1台のホストで動いている」モードで設定の確認をする。 これが擬似分散(Psuedo-distributed)モード。 擬似分散モードに必要な各設定の意味 擬似分散(Psuedo-distributed)モードの動作には以下、四つの設定が必要。 完全分散(Full distributed)モードでも変わらないんだけどね。 HDFSのメタデータを格納するnamenodeの設定 データをいくつ複製(replication)するかの設定(デフォル

    [Hadoop]Hadoop 擬似分散(Psuedo-distributed)モードの設定 | Nobwak's Lair
    volonte
    volonte 2016/01/19
    擬似分散モードの作り方