ということで、Google MapReduceの実装であるHadoopを使ったMapReduceと、JMSを使ったMapReduceをやってみました。メッセージキューを使って分散MapReduceを実装するHadoopでのMapReduceを気軽に試すサンプル これ何のためにやったかというと、そこらにあるよう... 続きを読む
Disco is an open-source implementation of the MapReduce framework for distributed computing. It was started at Nokia Research Center as a lightweight framework for rapid scripting of distributed data processing tasks. The Disco core is writte... 続きを読む
MapReduce course, a part of 2008 Independent Activities Period at MIT Q: What is MapReduce? A: MapReduce is a paradigm of distributed computing. It is great for tackling a large class of problems, and is widespread at Google.Q: When and wher... 続きを読む
はじめに この連載では、大規模分散計算フレームワーク「Hadoop」と、その上につくられた大規模分散データベース「hBase」の仕組みと簡単なサンプルアプリケーションを紹介します。HadoopとhBaseは、Googleの基盤ソフトウェアのオープンソースクローンです。機... 続きを読む
Update: Typical Programmer tackles the technical issues in Relational Database Experts Jump The MapReduce Shark. The culture clash is still what fascinates me. David DeWitt writes in the Database Column that MapReduce is a major step backward... 続きを読む
By David DeWitt on January 17, 2008 4:20 PM | Permalink | Comments (42) | TrackBacks (1) [Note: Although the system attributes this post to a single author, it was written by David J. DeWitt and Michael Stonebraker] On January 8, a Database C... 続きを読む
Post to Twitter Post: Hadoop From: kakuda, 11 months ago HadoopView SlideShare presentation or Upload your own. (tags: hadoop mapreduce) Yahoo!でも使われているMapReduceのオープンソース版「Apache Hadoop」の紹介と動かし方 SlideShare Link close... 続きを読む
Update: Greg Linden points to a new Google article MapReduce: simplified data processing on large clusters. Some interesting stats: 100k MapReduce jobs are executed each day; more than 20 petabytes of data are processed per day; more than 10k... 続きを読む
第1回「Googleの分散処理技術」 「丸山先生レクチャーシリーズ」を今年も開催致します。今年度で6年目となります。 Java黎明期からJavaに注目し続け、東京秋葉原にて社会人のIT技術者を対象としたサテライト校を開講している稚内北星学園大学の丸山先生を中心に... 続きを読む
Web, 分散処理, アルゴリズム, 講演はじめに、サブタイトル後半のSawzallはMapReduce用のDSLでこれが結構凄い上に、GFSやMapReduceのようにオープンソースの代替物がないのだそうですが、時間がないので詳しい話は聞けませんでした。後日公開される講演資料に載... 続きを読む
HOME - ARCHIVE - ABOUT - RSS 2006-08-08 今夏の自由研究 YouTube 上で自作映像の配信を行ってみる。 機器の導入 画質を求めるならばデジタルビデオカメラの導入が適しているが,比較的高価であることが難点として挙げられる。画質を求めておらず,なおかつ自... 続きを読む