［前編］ビジネス貢献に歩み出したHadoop
オープンソースソフトウエア（OSS）の分散バッチ処理ソフト「Hadoop」を利用する企業が相次いでいる。2011年11月に米国で開催されたカンファレンス「Hadoop World NYC」では、米JPモルガン・チェースなどの最新事例が登場した。前編では本会議で明らかにされた活用動向を紹介し、後編では主にベンダー側の動向を報告する。 2011年11月8日から2日間にわたり、「Hadoop World NYC 2011」が米国ニューヨークで開催された。3回めの開催となる今回は、27カ国から1400人を超えるITマネジャーや開発者などが集まった（写真1）。 Hadoop Worldは東海岸で開催されるだけあってビジネス色が強く、最新事例や提携の発表が多い（表1）。主催は、Hadoop専業であり、Hadoopの生みの親ダグ・カッティング氏が所属する米クラウデラ。今回のスポンサーには、Hadoop関
[IT] Jubatus / ビッグデータをリアルタイムに高速分析処理する基盤技術 – FXFROG
http://jubat.us/ にて先ほど公開されましたビッグデータをリアルタイムに高速分析処理する基盤技術 「Jubatus」 について少し追ってみましょう。 Twitter : https://twitter.com/#!/JubatusOfficial — 「大量データ」を「常に素早く」「深く解析」する、大規模分散リアルタイム解析フレームワーク。 大量のデータを複数のサーバーに振り分け、並列かつ逐次的に処理させていくもの。 Hadoop と異なるのは、Jubatus は始まったばかり。 // 普段私が取り組んでいる GPGPU はローカル並列モデルですが、 Hadoop 、 Jubatus もまた並列度を高めていくもの。世の中の方向性は計算ノード、ストレージノード、結果（出力）ノードにきちんと向いていくと感じます。 いつまでも 高性能 CPU に期待していては駄目だと思う。 —
![[IT] Jubatus / ビッグデータをリアルタイムに高速分析処理する基盤技術 – FXFROG](https://cdn-ak-scissors.b.st-hatena.com/image/square/4a2b1f7459d06af1790a6b3ffca6d11e3596bee6/height=288;version=1;width=512/https%3A%2F%2Fwww.fxfrog.com%2Fwp-content%2Fthemes%2Flionmedia%2Fimg%2Fimg_no.gif)
"BigData"では何が問題なのか？ - 急がば回れ、選ぶなら近道
”ビッグデータで奇跡が起こる” はいどうも。まず、個人的には楽天的な進歩史観には、まったく組しない。 従って、突然に新技術ができて、なんか凄い事になる、というのはさらにまったく同意しない。すべからくブレイクスルーは課題解決により起こると思っているので、問題意識のないところに、こんなものできました的な発想は、基本的にプラスにならないことが多いと思っている。現状のビッグデータブームは2011年の秋口現在は完全にハイプになっており、バブルと言ってもいいと思う。印象として、十数年前のナノテク・ブームに似ている。 とはいえ、過度の期待という側面を除けば、それなり効果もある部分もあり、”そこだけ”を見ていけばそれなりに効果はある（と思う）。大体において、今後は以下の二つのユースケース・カテゴリーに集約されると思う。すなわち、ビッグデータの拠り所はまずもって以下の２点だ。 1 Webのログ解析 というか
国立情報学研究所 佐藤教授が語る「クラウドコンピューティングの将来動向」（ビッグデータ編）
8月31日から2日間、都内で行われたイベント「Cloud Computing World Tokyo 2011」。そのイベントへの申し込み段階で最初に満員となったのが、国立情報学研究所 佐藤一郎教授のセッション「クラウドコンピューティングの将来動向」でした。 技術的な背景に基づき、ビッグデータ活用に必要な条件とは何か、クラウドのビジネスモデルはどうなるのか、データセンターの進化の方向性、などについて具体的な解説が行われています。 この記事では、そのセッションの内容を紹介しましょう。 ビッグデータ流行の背景となったMapReduce/Hadoop 国立情報学研究所 アーキテクチャ科学 研究系 教授 佐藤 一郎氏。 分散システムの研究者から見た、クラウドのインフラの話、10年先の話をしようと思います。 1つ目はビッグデータの話題。 ビッグデータの処理技術「MapReduce/Hadoop」は、
2016年度までのITロードマップ（ビッグデータ編）を発表～ビッグデータ活用が企業の競争力の向上や社会問題の解決に寄与～ | 野村総合研究所(NRI)
2016年度までのITロードマップ（ビッグデータ編）を発表 ～ビッグデータ活用が企業の競争力の向上や社会問題の解決に寄与～ 2011年5月24日 株式会社野村総合研究所 株式会社野村総合研究所（本社：東京都千代田区、代表取締役社長：嶋本 正、以下「NRI」）は、2016年度までのビッグデータ活用の進展と、そのインパクトを予測した「ITロードマップ」※1をとりまとめました。ハードウェア、及びソフトウェア技術の進化によって、これまでは困難だった、複雑で大規模なデータの分析処理が可能になり、今後、企業の競争力の向上や社会問題の解決に役立つことが予想されます。 この数年、利用者が急激に拡大しているソーシャルメディア※2内のテキストデータ、携帯電話・スマートフォンに組み込まれたGPS（全地球測位システム）から発生する位置情報、時々刻々と生成されるセンサーデータなど、我々の日々の生活の中で生み出される
ビジネスネットワーク.jp｜ジェミナイ・モバイル・テクノロジーズ連載｜目次
メール、SNS、TwitterのようなWebサービスが急拡大すると、莫大な量のログやメッセージが一気にサーバーに流れ込む。この巨大なデータのフローやストックは、サービスが拡大する過程では不可避であり、喜ばしい反面、大きな脅威となる。そのため通信やクラウド関連のエンジニア達の間では「Big Data」と呼ばれ、将来を占ううえでの最大級の関心事となっているようだ。 先駆者であるGoogleやAmazonなどは、Big Dataに直面することをいち早く予見し、独自のデータベースを核とするクラウド環境を開発して対応した。彼らのサーバーがダウンせず、顧客がほぼ不満無く利用し続けられているのも、この先見性と技術力があったればこそ。しかし、このBig Dataとの戦いは、すでに彼らだけの世界にとどまるものではない。世界中でベンチャーを中心に、Big Data対応のメールシステムやデータベースの開発が始ま
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
NTTとPFI、大規模データ分析基盤技術「Jubatus」を開発～OSSとして公開
Good night, Posterous
agilecatcloud.com
ビッグデータ - 次なるフロンティア
Hadoopコミュニティに参加べき5つの理由 | 大規模計算ドットコム
agilecatcloud.com