タグ

関連タグで絞り込む (1)

タグの絞り込みを解除

emrとlinuxに関するkma83のブックマーク (1)

  • AWS EMRメモ(Hishidama's Amazon Elastic MapReduce Memo)

    S-JIS[2013-06-15/2014-01-25] 変更履歴 Amazon EMR EMRは、AWSでHadoopを実行できるサービス。 概要 EMR(Elastic MapReduce)は、Hadoopを実行できるサービス。 EMRでは、1つのHadoopクラスターをEMRインスタンスと呼ぶ。 EMRインスタンスはEC2インスタンスを何台も使ってHadoopクラスターを組む。 使用する際にEMRインスタンスを起動し、使い終わったら削除するのが基的な使い方。 (使うときだけ大量のサーバーを使用する、まさにクラウドらしいサービス) データは(HDFS上に永続的に保存するのではなく、)S3から読み込み、S3上に保存するのが基。 したがって、NameNodeの冗長性はEMRでは必要ない。 (物理サーバーのHadoopクラスターの場合、NameNodeをずっと起動し続けている(あるいは毎

    kma83
    kma83 2015/10/21
    AWS EMRメモ(Hishidama's Amazon Elastic MapReduce Memo)
  • 1