タグ

Hadoopに関するhrak2000のブックマーク (3)

  • HBaseとはどんなNoSQLデータベースなのか? 日本語で読める情報を集めてみた

    Facebookが新しいサービス「Messages」の基盤として、NoSQLデータベースの「HBase」を選択したことを、先日の記事「Facebookが新サービスの基盤にしたのは、MySQLでもCassandraでもなく、HBaseだった」で紹介しました。 HBaseは、Facebookによると次のような特徴を備えていると説明されてます。 負荷に対して非常に高いスケーラビリティと性能を発揮 CassandraよりもシンプルなConsistency Model(一貫性モデル)を備えている 自動ロードバランス、フェイルオーバー、圧縮機能 サーバーごとに数十個のシャードを割り当て可能、などなど このHBaseはどのようなデータベースなのでしょうか? 情報を集めてみました。 HBase入門のプレゼンテーション 最初に紹介するのは「HBaseエバンジェリスト」Tatsuya Kawano氏のプレゼン

    HBaseとはどんなNoSQLデータベースなのか? 日本語で読める情報を集めてみた
  • NTTデータがHadoopビジネスを拡大、米クラウデラと提携

    NTTデータは、オープンソースの分散バッチ処理ソフト「Hadoop」専業のベンチャー企業である米クラウデラと提携し、クラウデラの開発するHadoop関連製品を、日を含むアジア太平洋地域で販売する。2010年10月12日(米国時間)に米国ニューヨークで開催される「Hadoop World 2010」で、NTTデータの山田伸一常務が発表する。両社は共同で、Hadoopのサポートや研修サービスなども展開する。 Hadoopは、分散処理システムを構築するためのミドルウエア。グーグルがWeb検索エンジンのインデックスを作成するために独自開発した分散バッチ処理ソフト「MapReduce」と、分散ファイルシステムの「Google File System(GFS)」を基にして作られた。プログラマはHadoopを使うことで、データをノードに分散したり集約したりするネットワーク処理機構を、独自に開発する必要

    NTTデータがHadoopビジネスを拡大、米クラウデラと提携
  • 企業でのHadoop導入を支援、PFIとぷらっとホームが製品開発へ - @IT

    2009/11/19 プリファードインフラストラクチャー(PFI)は11月19日、ぷらっとホームと協力し、分散処理技術MapReduce」のオープンソース実装「Hadoop」を活用した、分散データ処理システム導入支援製品の開発に取り組むことを発表した。 Hadoopは、グーグルが開発した大規模データの分散処理技術、「Google File System」(GFS)と「MapReduce」をオープンソースで実装したものだ。大量のデータを細かく分割し、数千台クラスの多数のサーバで並列的に処理を行ったのち、結果を集約することにより、高速な処理を可能にする。すでに、米Yahoo!Amazonのほか、Facebook、ユニークなところではNew York Timesなどが、インデックスの生成やログ解析に採用している。 PFIは、Hadoopの導入には高い技術力とノウハウが必要なことから、一般的な

  • 1