この投稿はHadoop Advent Calendarの17日目の記事です。 Elastic MapReduceを宣伝するような投稿になりそうですが、私自身がHadoopをオンプレミスで導入・運用したときの煩雑さを思いながら書きました。技術ネタが少ないので、後はWebでということで。。。 Hadoopはビッグデータを扱うシステムの開発コストを劇的に下げました。では、ビッグデータシステムの運用コストはどうでしょうか? Hadoopの導入と運用は簡単ではない Hadoopを導入する場合のシナリオを考えてみましょう。キャパシティ・プランニング、見積もり、サーバー調達、ラックへ設置、電源とネットワークを設定、OSインストールと基本設定、Hadoopインストールとクラスタ構築、この一連のプロセスを通して、一ヶ月ぐらいはかかるだろうか、やっとHadoopを使い始められるわけですね。その中でも、特に難し