Hadoop splittable-lzo-compression3. 自己紹介 佐藤 大樹(dandaso) 2003∼2006 (株)ドワンゴ 2006∼2008 ウノウ（株） 2009∼ (株)スペイジーズ スペイシーズは人財を募集しております ・確率分布、統計、検定などの基礎知識 ・回帰分析などの統計分析手法の知識 ・パターンマイニング、分類器、 クラスタリングなどの機械学習の知識 4. 大規模データ向けのバッチ分散処理システム File File File File Namenode HDFS DataNode JobTrcker MAP MAP MAP MAP TaskTracker Reduce Reduce Out Out 5. WordCount INPUT MAP SHUFFLE REDUCE CAT DOG CAT 1 CAT 1 ELEPHANT DOG 1 CAT 1 CAT 4 ELEPHANT 1 CAT 1 C
