Hadoop0.23 MapReduceメモ(Hishidama's Hadoop0.23 MapReduce Memo)

概要 従来（Hadoop0.23より前）のMapReduceで作ったプログラムを（何も設定していない状態の）Hadoop0.23で動かすと、ちゃんと動く。 しかし、YARNのプログラムを動かすにはリソースマネージャーやノードマネージャーを起動しておく必要があるので、 逆にMapReduceプログラムはYARN環境で動いたわけではない、ということになる。 実のところ、何も設定していない状態のHadoop0.23でMapReduceプログラムを動かすと、ローカルモードで実行されるようだ。 YARN環境で動かすにはHadoop0.23の設定を変更する必要がある。 MapReduceをYARNで動かす設定 MapReduceプログラムをYARN（リソースマネージャーとノードマネージャーが動いている環境）で動かすには、以下の設定をする必要がある。 設定値 デフォルト値 備考