NTTデータのHadoop報告書がすごかった - 科学と非科学の迷宮
業界トップ のエンタープライズ Hadoop 企業 Cloudera に入社しました http://www.cloudera.co.jp/ 今年の6月に、「平成２１年度 産学連携ソフトウェア工学実践事業報告書」というドキュメント群が経産省から公表されました。 そのうちの一つに、NTTデータに委託されたHadoopに関する実証実験の報告書がありましたので、今更ながら読んでみることにしました。 Hadoop界隈の人はもうみんなとっくに読んでるのかもしれませんけど。 http://www.meti.go.jp/policy/mono_info_service/joho/downloadfiles/2010software_research/clou_dist_software.pdf 「高信頼クラウド実現用ソフトウェア開発（分散制御処理技術等に係るデータセンター高信頼化に向けた実証事業）」という
NTTデータのHadoopソリューション：Hadoop構築・運用ソリューション
NTTデータのソリューションとは NTTデータは、大規模データの活用にHadoopを利用した、分散処理のアプローチで多くの実績があります。 従来は夜間時間帯で実行していたバッチ処理を高速化することで、より早く情報を活用できる機会を創りました。 また、機器の容量不足などにより数日間分で捨てていたデータを数か月～年単位で保存することで、分析の精度を高めることができるようになりました。 実現したいことに応じて、数台～千台規模のサーバーからなるHadoopシステムを導入するなどの実績がございます。 加えて、データの活用シーンに応じて様々な分散処理環境を提供してきた実績もございます。 そして、数年以上のHadoopシステム運用で得られたノウハウを蓄積しています。 分散処理技術Hadoopについて Hadoop, Spark, Kafkaを利用した分散処理システムに強み NTTデータでは、Hadoop
NTT、高速なOpenFlow対応ソフトウエアスイッチ「Lagopus」をオープンソース化
NTT持ち株会社は2014年6月6日、同社が開発したOpenFlow対応のソフトウエアスイッチ「Lagopus」（ラゴパス）を、7月にもオープンソースソフトウエア（OSS）として公開すると発表した。併せて、すでにOSSとして提供を始めているSDNコントローラー「Ryu SDN Framework」（以下、Ryu）を活用した、OpenFlowスイッチのテストセンターを設立する。 「Lagopus」は、NTTが2013年12月に発表したプロトタイプのソフトウエアスイッチを改良したもの（関連記事：NTT、10万フローを10Gビット/秒で処理できるOpenFlow対応ソフトスイッチを開発）。Lagopusは雷鳥を意味し、クラウド（雲）の中で活用されるソフトウエアスイッチを目指して命名された。 制御用プロトコルとしてOpenFlowプロトコルに対応し、OpenFlowのフローエントリーを100万行程
11_11_FromNTT.indd
NTT技術ジャーナル 2014.11 48 ビッグデータ分析の課題 ビッグデータを活用したビジネスの成功事例が数多く報 告されており， 多くの企業が 「自社のビジネスにビッグデー タを活用できないか」と検討を始めています．しかし，検 討を始めてみると「蓄積したデータを分析してみないと， 得られる効果が明確にならない」 「効果を明確化できない 段階で投資判断することは難しい」という課題を抱えてい るのではないでしょうか． ビッグデータ分析で価値のある知見を得るためには，長 期間にわたり蓄積された大量のデータを分析する必要があ ります．そのため，分析できるデータを蓄積して，得られ る効果を判断するまでには長い時間を要してしまいます． また，ビッグデータ分析は多種 ・ 大量のデータを蓄積す るために大規模な設備が必要であり，このような設備を自 社で構築する場合には，大きな投資が必要となります．さ
Big Data + Fast Data = ラムダアーキテクチャー！ | NTTデータ先端技術株式会社
はじめに 本コラムでは、ビッグデータ分析とファストデータ分析を組み合わせるための仕組みである「ラムダアーキテクチャー」の紹介をする。私どもは現在、Apache Sparkを最大限に活用したラムダアーキテクチャーの構想を練っており、その実現方式が固まった際は、コラムにてサンプルを紹介しようと考えている。ただ、「ラムダアーキテクチャー」という言葉に耳慣れない人もまだ多いかと思い、まずはラムダアーキテクチャーについての説明から始めることとする。 ビッグデータ、ファストデータ関連の潮流 まずは、ビッグデータとファストデータ（≒リアルタイム、≒ストリーミング）の世間の潮流について復習する。ここでの「世間の潮流」とは、あくまで、筆者の個人的な感覚をもとにして記載している。エンジニア視点で書いているため、経営者支援やマーケッター視点とは異なると思われるが、その点はご容赦頂きたい。 Hadoopの登場によ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
故障・メンテナンス情報（サービス稼働状況） | Enterprise Cloud Knowledge Center
