タグ

関連タグで絞り込む (1)

タグの絞り込みを解除

プログラミングとアーキテクチャに関するhikohicoのブックマーク (1)

  • 「Hadoopの処理の流れ」を理解し、実践する

    書籍の中から有用な技術情報をピックアップして紹介するシリーズ。今回は、秀和システム発行の書籍『Hadoopファーストガイド(2012年9月20日発行)』からの抜粋です。 ご注意:稿は、著者及び出版社の許可を得て、そのまま転載したものです。このため用字用語の統一ルールなどは@ITのそれとは一致しません。あらかじめご了承ください。 Hadoopの処理の流れ 前回はHadoopのメリットとデメリットを説明しました。今回は、「Hadoopの処理の流れ」を説明していきたいと思います。なお、稿では基的に「Hadoop Streaming」の挙動について説明していきますが、参考のためにHadoopの挙動についても触れていきます。 Mapフェーズ MapReduceはMapフェーズ、Shuffleフェーズ、Reduceフェーズの順で処理されていきます。まず、入力データはMapフェーズでMapper

    「Hadoopの処理の流れ」を理解し、実践する
  • 1