Amazon Elastic MapReduceを使ってみた - moratorium
Amazon Elastic MapReduceを使ってみた 2009-04-03 (Fri) 3:06 Amazon EC2 連日のEC2ネタです。本日、AmazonからElastic MapReduceというサービスがリリースされました。大規模データ処理技術が一気に民間の手に下りてくる、まさに革命的なサービスだと思います。 Amazon Elastic MapReduce Amazon ElasticMapReduce 紹介ビデオ With Hadoop, Amazon Adds A Web-Scale Data Processing Engine To Its Cloud Computer by techcrunch.com Elastic MapReduceは、Googleの基盤技術の一つであるMapReduceを時間単位課金で実行できるサービスです。MapReduceについては以
Cloudera，分散処理プラットフォーム「Hadoop」の導入を支援するパッケージ
米Clouderaは米国時間2009年3月15日，分散処理プラットフォーム「Hadoop」の導入を支援するパッケージ「Cloudera's Distribution for Hadoop」を発表した。同社サイトから無償でダウンロードできる。Red Hat系Linuxと米Amazonの仮想サーバー・ホスティング・サービス「Amazon EC2」を利用する企業が，Hadoopを容易に導入／構成できる。 Hadoopは，米Apacheが開発するオープンソースの分散処理プラットフォーム。米Googleが開発したデータ処理モデル「MapReduce」を実装しており，大規模なデータを多数のマシンで並列処理できる。 ApacheはHadoopをtar.gz形式のアーカイブ・ファイルで公開しており，導入や構成の手間がかかるが，これを支援するのがClouderaの今回のパッケージとなる。RPM形式でパッケー
Hadoopのインストールとサンプルプログラムの実行
前回はGoogleの基盤技術とそれに対応するオープンソースソフトウェアとして、Hadoop & hBaseを紹介しました（図1 参照）。今回はHadoopを1台にインストールし、サンプルプログラムを動かします。次にHDFSとMapReduceのアーキテクチャを解説します。最後にサンプルプログラムのソースコードを解説します。 2. Hadoopの概要 Hadoopは主にYahoo! Inc.のDoug Cutting氏によって開発が進められているオープンソースソフトウェアで、GoogleFileSystemとMapReduceというGoogleの基盤技術のオープンソース実装です。Hadoopという名前は開発者の子供が持っている黄色い象のぬいぐるみの名前に由来しています。HadoopはHDFS（Hadoop Distributed File System）、Hadoop MapReduce F
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Big Data Platform - Amazon EMR - AWS
