分散システムのFault Injectionの話 NTTデータテクノロジーカンファレンス2017で発表する際に用いたプレゼン資料 https://oss.nttdata.com/hadoop/event/201710/index.html Read less
8/10のNTT Tech Conference #2 にて発表の時間をもらってこのタイトルで喋ってきた ntt-developers.github.io 発表が決まるまで これはNTTグループ内のソフトウェア・ネットワーク系技術者が集まるコミュニティで、誰が発表者になれるかは投稿されたProposalに対するコミュニティ内での投票によって選考される。 何を話したいか自分の中でも固まりきっていなかった上に、主催者の話をロクに聞いていなかった自分は小さい部屋で僕のことを知る人しか集まらない不人気セッションを勝手に想像しており、abstractを書く欄に「実世界で使われている分散システムを構成する際に理解してほしい議論についてkumagiが一人で滔々と語る。」という漠然とした説明を書いた。初心者にこそ聴いて欲しいという身勝手な理由でレベル設定をBeginnerにし、自己紹介欄に至っては本当は経
ビッグデータの活用で新たなビジネス価値を模索する動きが活発化している。顧客のニーズを明らかにし、その実現を支えるCEPやHadoopなどの基盤技術について、NTTデータのキーマン3人に話を聞いた。 (このコンテンツは日立「Open Middleware Report vol.58」をもとに構成しています) 処理の高速化だけでない、新たな価値の創造を 日本最大級のSIerとして、企業や社会の発展を支えるソリューションを提供し続けているNTTデータ。同社は、RFIDや各種センサーなどから得られるセンシングデータ、ユーザーの購入履歴やSNSなどから得られるライフログデータなどが「ビッグデータ」として注目を集める以前から、増え続ける大量のデータを効率的に処理し、有効活用する取り組みをスタートさせていた。 その具体例の1つが、2008年から開始されたHadoop活用である。きっかけは、現在のHado
NTTコミュニケーションズが「Cloudn」でパブリッククラウド本格参入。個人も利用可能で月額945円から、Amazon互換API、日米データセンター展開など NTTコミュニケーションズとグループ会社である米Verioは、Amazonクラウドのようにクレジットカードで申し込んですぐに使え、各種APIからの操作も可能とするパブリッククラウド市場への参入を発表しました。日米のデータセンターで展開しつつ低価格であることもアピールするなど、本気でグローバルなクラウドプレイヤーと競合しようという意気込みです。 発表されたのは、オープンソースのクラウド基盤「CloudStack」を採用したパブリッククラウドの「Cloudn」(クラウド・エヌ。このように右上にnがくるのが正式表記とのこと)。3月30日から提供開始となります。 従量課金制ながら月額に上限。20分で利用可能 Cloudnでは仮想サーバの課金
Cassandra、Hadoopを用い、ソーシャル機能も備えた業務アプリケーション基盤、NTTデータイントラマートが開発を発表 業務アプリケーションによるソーシャル機能の取り込み、NoSQLによるスケーラブルなデータベース、Hadoopによる分散データ処理。これらはエンタープライズITの新たなテクノロジートレンドですが、これらをすべて取り入れた業務アプリケーション用のプラットフォームを、NTTデータイントラマートが開発中であることを明らかにしました。 NTTデータイントラマートが先週10月22日に行った同社のイベント「intra-mart Enterprise Web Solution 2010」で、同社が開発中の業務アプリケーションフレームワーク「intra-mart WebPlatform Ver8.0」のデモンストレーションを公開。そこには、Twitterライクなタイムライン、NoS
NoSQLデータベースを開発する「Couchbase」は、NTTドコモの海外拠点の1つで米国にある「Docomo Innovations」と、戦略的提携(strategic customer relationship)を結んだことを発表しました。 Couchbaseは、ドキュメント管理を得意としJSONでデータの入出力が可能なCouchDBと、memcachedとプロトコル互換を保証しつつ、階層型データストア管理などを実現してきたMembaseが今年の2月に合併してできた会社です。 同社のNoSQLデータベース「Cauchbase」は、iPhoneやAndroidなどモバイルデバイスに対応すると同時に、サーバやクラウドなどでも動作し、両者のリアルタイムなデータ同期も特徴となっています。 今回の提携発表の中で、NTTドコモ サービス&ソリューション開発部 部長 栄藤 稔氏は次のようなコメント
NTT DATA has been providing Hadoop professional services for enterprise customers for years. In this talk we will categorize Hadoop integration cases based on our experience and illustrate archetypal design practices how Hadoop clusters are deployed into existing infrastructure and services. We will also present enhancement cases motivated by customer’s demand including GPU for big math, HDFS capa
注目が集まるビックデータ分野を支える技術の本命は、オープンソースの分散処理ソフトHadoopだろう。Hadoopは、Googleが唱える大規模データ処理方式を実装したオープンソースソフトウェアで、テラバイト~ペタバイト級のデータの蓄積・処理を得意とする。IBMはHadoopをベースとした製品をリリースし、オラクルは主要製品ExadataとHadoopのコネクタを発表して連携を推し進めている状況だ。 こうした中、米国ニューヨークで11月8日より2日間「Hadoop World NYC 2011」が開催された。Hadoop Worldは第3回目の開催で、最新事例や技術に関する情報が一同に集まるイベントとして知られている。27カ国から1400名以上が集まり、60を超える講演が繰り広げられた。 このイベントにおいて、NTTデータは「Hadoop's Life in Enterprise Syste
『週刊ダイヤモンド』特別レポート ダイヤモンド編集部による取材レポートと編集部厳選の特別寄稿を掲載。『週刊ダイヤモンド』と連動した様々なテーマで、経済・世相の「いま」を掘り下げていきます。 バックナンバー一覧 NTTの研究所には、研究所長などの上級幹部で残らない限り、50歳前後で勇退するという不文律がある。大学院の修士課程や博士課程を経て20代半ばで入所するので、現役の研究者でいられる期間は20年と少し。一方で、NTT本体は、電話の時代からインターネットの時代に入り、事業基盤の再構築を余儀なくされている。前回に続き、ベールの向こう側にある研究所の実像に迫った。 (「週刊ダイヤモンド」編集部 池冨 仁) NTTには、もう研究所は必要ないのではないか。技術は買ってくればよいのではないか──。 NTTグループの中からさえ、そのような否定的な声が出るようになった。その原因は、1990年代の後半に日
『週刊ダイヤモンド』特別レポート ダイヤモンド編集部による取材レポートと編集部厳選の特別寄稿を掲載。『週刊ダイヤモンド』と連動した様々なテーマで、経済・世相の「いま」を掘り下げていきます。 バックナンバー一覧 NTTの研究所には、研究所長などの上級幹部で残らない限り、50歳前後で勇退するという不文律がある。大学院の修士課程や博士課程を経て20代半ばで入所するので、現役の研究者でいられる期間は20年と少し。一方で、NTT本体は、電話の時代からインターネットの時代に入り、事業基盤の再構築を余儀なくされている。ベールの向こう側にある研究所の実像に迫った。 (「週刊ダイヤモンド」編集部 池冨 仁) 2005年3月8日、米カリフォルニア州オレンジ郡アナハイムには、世界中の通信事業者や通信機器メーカーが集まっていた。 その日、NTT(持ち株会社)の篠原弘道アクセスサービスシステム研究所長(当時)は、光
* NTT daichi@cslab.kecl.ntt.co.jp 2011 2011-3-10(Fri), z PDF : http://chasen.org/~daiti-m/paper/nlp2011semiseg.pdf – , “ ” z ( , , , ...) – ...(Brain damaged!) Twitter Blog z (“ ”,“ ”,“ ”...) – z ... CSJ (+, ACL2009) z , – : NPYLM (Nested Pitman-Yor LM) 1 2 10 50 100 200 NPYLM as a Semi-Markov model z Semi-Markov HMM (Murphy 02, Ostendorf 96) +MCMC z (n ) BOS EOS Æ z , – “ ”, “ ” – “ ”Æ“ ”, “ ”Æ“
2011/05/31 18:16 NTTデータは2011年6月2日、Hadoopの商用ディストリビューション「Cloudera's Distribution including Apache Hadoop v3(CDH3)」を提供開始する。パッケージには、Hadoopの導入を支援するソフトウエア群とサポート・サービスが含まれる。価格は、1ノードあたり年額25万円(税別)で、5ノード以上で販売する。CDH3は、米Clouderaが作成した、Hadoopの配布パッケージ。Hadoopを使ったアプリケーション開発で用いる代表的なオープン・ソース群を含むほか、インストール・パッケージ(RPM形式)の提供やGUIベースの独自の運用管理ソフトなど、Hadoopの導入や設定を簡単に行えるようにする仕組みを提供する。無償版に加えて、有償サポートを含む商用版を用意している。 NTTデータは今回、CDH3の商
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く