タグ

ビッグデータに関するKei_Nanigashiのブックマーク (3)

  • Google、ビッグデータ分析サービス「BigQuery」の正式版をリリース

    Googleが、昨年11月にプレビュー版を公開したビッグデータ分析サービスを、有料サービスとして正式にリリースした。 米Googleは5月1日(現地時間)、昨年11月にプレビュー版を公開した企業向けビッグデータ分析サービス「Google BigQuery」の正式版をリリースしたと発表した。 BigQueryは、同社が2010年の開発者向けカンファレンス「Google I/O」で発表したクラウド分析サービス。クラウドデータベース「Google Cloud SQL」と異なり、大容量のCSVデータの分析に向いていおり、テラバイト級の、数兆件のデータを含むファイルを数秒で分析できるとしている。 ユーザーはGoogleのクラウドストレージサービス「Google Cloud Storage」に分析したいデータをアップロードし、Webブラウザ経由で分析できる。プレビュー版は無料だったが、正式版は1カ月当

    Google、ビッグデータ分析サービス「BigQuery」の正式版をリリース
  • NTTら、ビッグデータをリアルタイムで処理する基盤技術をOSSとして公開 | 経営 | マイコミジャーナル

    NTTとプリファードインフラストラクチャーは10月26日、ビッグデータと呼ばれる大容量かつ大量のデータをリアルタイムで高速に分析処理する基盤技術「Jubatus」(第1版)を開発したと発表した。同技術は、27日よりオープンソースソフトウェアとして、Jubatus OSS提供サイトで公開される。 現在のビッグデータの解析方法では、クラウド環境を構成するサーバ群にビッグデータをいったん蓄積して一定期間分をまとめて高速に処理するバッチ処理が一般的だが、この方法では新たなデータの分析が次の実行タイミングまで待たされる点で十分ではない。 これに対し、Jubatusは「大量データ」を「常に素早く」「深く解析」するためのフレームワークとなっている。具体的には、大量のデータを複数のサーバに振り分け並列かつ逐次的に処理しており、複数のサーバ間で緩やかに途中処理結果を共有することで、サーバ間の通信オーバヘッド

    Kei_Nanigashi
    Kei_Nanigashi 2011/10/27
    今のトレンドはビッグデータなんですかね
  • NEC、毎秒250万件のデータ処理が可能な技術を開発

    5000万台の携帯電話が1分ごとに発信する位置情報を、32台のサーバで処理できることを確認したという。 NECは10月26日、大量のセンサから収集した“ビッグデータ”を高速処理できる技術を開発したと発表した。試験的に構築したサービスにおいて、5000万台の携帯電話が1分ごとに発信する位置情報を32台のサーバで処理し、毎秒250万件のデータを処理できる性能を確認したという。 開発した技術では、フロー型のアーキテクチャを採用し、ビッグデータをストリーム処理できるようにした。予めサーバ上に保持しているデータの配信条件を基にして、ビッグデータの中から必要なデータのみをマッチングによって処理することにより、リアルタイムな情報提供を可能にしたとしている。 また、データのマッチング処理ではサーバの追加に比例して性能を向上できるスケールアウトアーキテクチャも採用する。構造をP2Pにすることで、配信ルールを

    NEC、毎秒250万件のデータ処理が可能な技術を開発
    Kei_Nanigashi
    Kei_Nanigashi 2011/10/27
    センサネットワークで思いついたのがスマートグリッドだけとか俺貧困。。
  • 1