GREE Labs 第16回 オープンソーステクノロジー勉強会 にいって来ました - d.hatena.zeg.lahttp://labs.gree.jp/Top/Study/20081125.htmlにいってきました メモ書きです、ほとんど資料の板書に近いです。。。 Hadoopの概要と最新の動向 自己紹介 太田一樹さん http://kzk9.net PFI http://prferred.jp Sedueの開発 はてぶ検索 Hadoop概要 Googe基盤のclone GoogleFS MapReduce Yahoo Research Doug Cutting が丸ぱくりで実装 Hadoop、hBaseで構築する大規模分散データ処理システム http://preferred.jp/pub/hadoop.html NTTレゾナントと共同調査 MapReduceとは 大規模データを集める 200億Page 400TB 大量のマシン プロセス起動,監視,通信,debug,最適化 MPI 並列プログラミン
