2009年12月23日20:37 Hadoop EC2上での分散処理(Hadoop)をローカルから実行 以前の記事で、Cloudera を使うことで hadoop-ec2 というコマンドが使えるようになって、Hadoop クラスタを起動したり、クラスタの中身を見たりできるということを紹介しました。今日は hadoop-ec2 で利用できるその他のコマンドを紹介します〜。 ・ master 上でコマンドを実行したいとき hadoop-ec2 exec [cluster] "実行したいコマンド" このように指定すると "実行したいコマンド" が master 上で実行されます。このコマンドとして Hadoop の実行コマンドを渡してあげれば、ローカルの環境から EC2 上で分散処理を実行することが可能です。 ・ master 上にファイルをコピーしたいとき hadoop-ec2 push [c