作者 Charles Humble , 翻訳者 吉田 英人 投稿日 2012年3月4日 セクション デベロップメント トピック Spring , Java , Dependency Injection , SpringSource , VMWare , デザインパターン , データベース設計 , 言語 , データベース , Patterns , 設計 , プロ... 続きを読む
ヴイエムウェアの「Spring Hadoop」、Spring FrameworkでJava開発者のHadoop活用が容易に Apacheのオープンソース・ライセンスの下、VMwareのWebサイトから配布予定 米国VMwareは2月29日、同社ソフトウェア「Spring Hadoop」を発表した。「Spring Framework」を... 続きを読む
注目が集まるビックデータ分野を支える技術の本命は、オープンソースの分散処理ソフトHadoopだろう。Hadoopは、Googleが唱える大規模データ処理方式を実装したオープンソースソフトウェアで、テラバイト~ペタバイト級のデータの蓄積・処理を得意とする。IBMはH... 続きを読む
Tokyo HBase Meetup - Realtime Big Data at Facebook with Hadoop and HBase (ja) - Presentation Transcript 1 Realtime Big Data at Facebookwith Hadoop and HBaseJonathan GrayJuly ,Tokyo HBase Meetup 2 3 ▪ ▪ ▪ ▪▪ ▪ ▪ 4 5 6 6 ▪ ▪ ▪ ▪▪ ▪... 続きを読む
「Apache Cassandra」の商用サービスを提供する米DataStaxは3月22日(米国時間)、Cassandraと「Apache Hadoop」を組み合わせたディストリビューション「Brisk」を発表した。1カ月半後のリリースに向け、ユーザー登録を開始している。 Apache CassandraとApache... 続きを読む
Loading… Flash Player 9 (or above) is needed to view presentations. We have detected that you do not have it on your computer. To install it, go here. MapReduceによる大規模データを利用した機械学習 - Presentation Transcript MapReduceによる大... 続きを読む
Loading… Flash Player 9 (or above) is needed to view presentations. We have detected that you do not have it on your computer. To install it, go here. Inside of Asakusa DSL - Presentation Transcript Asakusa DSLの内部 2011/02/25あらかわ (@ash... 続きを読む
2011/02/10 ウルシステムズは2月9日、Hadoopを使って企業の基幹業務システムのバッチを高速処理するためのソフトウェアフレームワーク「Asakusa Framework」を開発、正式版をオープンソースとして3月頃に提供すると発表した。なお、インテックは自社の仮想ホス... 続きを読む
MacBook Air 11インチ欲しい!、太田です。 1/27に、執筆に関わらせて頂いた「Hadoop徹底入門」という本が、翔泳社さんから出版されます。 OSS分散フレームワーク「Hadoop」の、日本語では初めてとなる書き下ろし本になります。執筆はNTTデータでHadoopのお仕事... 続きを読む
Facebookが新しいサービス「Messages」の基盤として、NoSQLデータベースの「HBase」を選択したことを、先日の記事「Facebookが新サービスの基盤にしたのは、MySQLでもCassandraでもなく、HBaseだった」で紹介しました。 HBaseは、Facebookによると次のような特... 続きを読む
Hadoop 0.21ではCounterでGCに使っている時間が見れるようになりました。 こんな感じです。 この例では5秒程度ですが、ジョブによってはもっとGCに時間を使っている場合があり、 もっと詳細を調べてチューニング出来ないかという話です。 まずはGCのログを取り... 続きを読む
今年の6月に、「平成21年度 産学連携ソフトウェア工学実践事業報告書」というドキュメント群が経産省から公表されました。そのうちの一つに、NTTデータに委託されたHadoopに関する実証実験の報告書がありましたので、今更ながら読んでみることにしました。Had... 続きを読む
レポート 見えてきたHadoopの“使いどころ”─「Hadoop Hack Night Vol.2」開催 2010年8月9日 Hadoop, クラウドコンピューティング, Yahoo!, データ解析 クラスタ, システム, セキュリティ, サービス, セッション, Yahoo この記事を読むのに必要な時間:およそ ... 続きを読む
作者 Michael Prokop , 翻訳者 吉田 英人 投稿日 2010年7月12日 午後7時55分 コミュニティ マネジメント トピック オープンソース , デプロイ/データセンター タグ DSLs , マネジメント , Adobe , MapReduce 原文(投稿日:2010/07/01)へのリンク Adobe は先日,... 続きを読む
Hadoop Summit 2010 Tunin… 3 days ago, 68 views Hadoop Summit 2010 Chal… 3 days ago, 65 views Hadoop Summit 2010 Bench… 3 days ago, 87 views Hadoop Summit 2010 Multi… 3 days ago, 53 views Hadoop Summit 2010 Machi… 3 days ago, 61 views Had... 続きを読む
前回の記事では、Hadoopが膨大なデータをバッチ処理するための「インフラ」としての性質を備えていること、情報爆発時代の新たなインフラとして普及しつつあることを説明しました。その中で、情報爆発時代に必要とされるインフラは、「スケール・アウトが可能で... 続きを読む
グーグルが大規模分散システムのために用いているMapReduceという技術を、オープンソースとして実装したJavaベースのソフトウェア「Hadoop」です。 Hadoopは当初、Yahoo!やFacebook、Facebookといったネット企業が数テラバイト、ペタバイトにおよぶ大規模なログ... 続きを読む
2010年6月6日日曜日 HBase: Java VM の GC とメモリー関連の設定 Question: Java VM のガベージコレクション(GC)の挙動が、リアルタイム性能に影響を与えたりしないでしょうか? Answer: フルGCの発生や慢性的なメモリー不足などにより、HBase が稼動している... 続きを読む
こんにちは。前回のHadoopの記事では、HadoopやMapReduceについての概要を説明しましたが、 今回は一歩踏み込んで、Hadoopの使いこなし方について書きたいと思います。 今回は、ある程度Hadoopを使ったことのある方、Hadoopのインストールをして、 オフィシャル... 続きを読む
8月に入社した佐々木です。こんにちわ! 入社してからはHadoopを使うことが多く、日々、大規模データと格闘しています。大変ではありますが、個人ではなかなか触ることが出来ないような大規模データを触れるのは楽しいです。 さて、Hadoopは最近色々なところで... 続きを読む