タグ

HadoopとcloudComputingに関するtsupoのブックマーク (2)

  • 優良企業はなぜHadoopに走るのか

    ちなみに、この分析のために必要とされるMapReduceのコードであるが、そのサイズはわずか20ステップだという。Yahoo!のプレゼンテーターである、エリック・バルデシュバイラー氏によると、たとえ経験の浅いエンジニアであっても、MapReduceによるプログラミングは可能であるとされる。 また、VISAのジョー・カニンガム氏からも、貴重なデータが提供されていたので以下に紹介する。同社では、1日に1億トランザクションが発生するため、2年間で700億強のトランザクションログが蓄積され、そのデータ量は36テラバイトに至るという。こうしたスケールのデータを、従来のRDBを用いて分析するには、約1カ月の時間が必要とされてきたが、Hadoopを用いることで13分に短縮されたという。 これまでは、Yahoo!にしろVISAにしろ、膨大なデータをRDBに押し込むほかに方法はなく、その分析に数十日を要する

    優良企業はなぜHadoopに走るのか
    tsupo
    tsupo 2009/10/15
    増え続けるデータを効率よくハンドリングするための仕組みとしてRDBに変わる選択肢をMapReduce型のHadoopに求める動き / 「もう、特定のデータベースベンダーに、膨大なライセンス料を支払う時代ではない」
  • 九州大学にクラウド現れる

    IBMと九州大学大学院システム情報科学研究院は12月2日、次世代の分散コンピューティングを研究、検証することができるクラウド・コンピューティング環境を同研究院に構築することで合意したと発表した。分散コンピューティング技術である「Hadoop」の検証などを行う。 日IBMはクラウド用ノードとして同社のブレードサーバ「IBM BladeCenter HS12/HS21」を同研究院に導入。まずはサーバブレード2台からはじめ、拡張する計画。日IBMは技術者を派遣し、同研究院で履修する10人の院生と共にHadoop環境の要件定義、構築を行い、学内外での活用の可能性を探る「プロジェクト・ベースド・ラーニング」を行う。 同研究院は今後、クラウドについての教育コースの開設や、学内IT基盤、外部インフラへのクラウドの適用を目指すとしている。 日IBMは、晴海事業所内にクラウドの検証施設を開設し検証

    九州大学にクラウド現れる
    tsupo
    tsupo 2008/12/03
    日本IBMは、晴海事業所内にクラウドの検証施設を開設し検証を行っているが、外部組織へのクラウド環境の構築は今回が初めて / 米IBMは米グーグルと協力し、米国のワシントン大学やマサチューセッツ工科大学、スタンフォード大学などにクラウド環境を構築する取り組みを行っている
  • 1