Amazon Elastic MapReduce – madoverloadAmazon Web Servicesには、Amazon Elastic MapReduce(EMR)というサービスもあり、Hadoopジョブを簡単に走らせることができます。Hadoopトレーニングでは、CDHを使って演習を行ないましたが、シングルノードだったため分散処理の醍醐味がなかなか味わえません。 家に複数ノードのマシンがなくても簡単に試すことができるEMRを試してみました。 準備 EMRの利用前にいくつかの準備をします。詳細は、Getting Started Guide を参照してください。 EMRの利用開始 EMRを利用する前に、EMRの利用申請を行う必要があります。これは、マネージメントコンソールでElastic MapReduceタブをクリックした際に、利用申請済みでなければ申請ページへのリンクが出るので、そこから申請すればOKです。 EMRコマンドラインクライアントのダウン
