グーグルが大規模分散システムのために用いているMapReduceという技術を、オープンソースとして実装したJavaベースのソフトウェア「Hadoop」です。 Hadoopは当初、Yahoo!やFacebook、Facebookといったネット企業が数テラバイト、ペタバイトにおよぶ大規模なログなどを分析するのに利用していましたが、現在ではVISAやJP Morgan Chase、China Moblieなど一般の企業でも大規模なデータ処理にHadoopを用いています。多くの処理がネットで行われるにつれ、「Big Data」と呼ばれる大規模データは処理のニーズはさまざまな企業に広がっています。 Hadoopは新しいデータ分析プラットフォームになる Hadoopの商用ディストリビューションを提供する「Cloudera」は、Hadoopをあらゆる企業、組織の情報分析プラットフォームにするというビジョ

VMwareでSpringSoruce部門のゼネラルマネージャのRod Johnson氏が来日し、プレス向けのメディア説明会を行いました。 VMwareは、セールスフォース・ドットコムと共同でクラウド上のJava実行環境「VMforce」、そしてグーグルとも共同でSpringフレームワークとGWT（Google Web Toolkit）を統合しGoogle App Engine上でサポートすることを表明。いま、Java対応のクラウドサービスを提供するベンダとして存在感を高めつつある同社の戦略を、あらためて聞きました。 SpringSourceはもともとはSpringフレームワークと呼ばれるJavaのフレームワークをオープンソースで開発するベンダでした。Springフレームワークは非常に人気のあるフレームワークで、WebLogicやWebSphereなど既存のミドルウェア上でも利用され、また

ここ数カ月、ソフトウェア開発の話題で「かんばん」（英語でも「Kanban」）という言葉を目にする機会が増えてきました。かんばんとは何で、どのようなものなのでしょうか？ 勉強がてら、いくつかのサイトを紹介していきましょう。 ビギナー向けの「Kanban101」 今年3月にかんばんビギナー向けのサイト「Kanban101」が立ち上がりました。このトップページがかんばんの特徴をよく表しています。 ソフトウェア開発におけるかんばんとは普通に日本語の「かんばん」のことで、誰でも見えるところに置かれて、ホワイトボードや黒板になっていて、記入したり、この画面のようにポストイットを貼って運用するのが一般的です。 かんばんの効果とは、このかんばんを模した画面に書かれているように「仕事のみえる化」「仕掛かりを減らす」「流れを見えるようにする」ということ。このサイトは英語ですが説明がとても簡潔で分かりやすいもの

クラウドのおかげで、アプリケーションは「デバイスにインストールされるのではなくキャッシュされる」ことになるだろう、とレイ・オジー氏 ウォールストリートジャーナルが先週主催したイベント「D8 Conference」。スティーブ・ジョブズが登場し、iPadのアイデアはiPhoneよりも先だったこと、iPadでFlashのサポートをしない理由、Androidとの競合などについて語ったことで話題になりました。 このD8 ConferenceにはそのほかFacebook CEOのMark Zuckerberg氏、映画監督のJames Cameron氏など多くの著名人がスピーカーとして登場しています。そしてマイクロソフトのスティーブ・バルマーCEOとレイ・オジーCSO（Chief Software Architect）も登場し、クラウドについて語っています。 アプリケーションはインストールされるよりむ

この数週間、Google App Engine（GAE）のデータストアは深刻な性能低下に見舞われており、しかも5月25日には45分間の障害も発生している、とグーグルはGoogle App Engine Blogにポストされたエントリ「Datastore Performance Growing Pains」で報告しています。 この原因についてグーグルは、2カ月ごとに25％増のペースでデータストアの利用が拡大していることを挙げており、これを収容するためにデータセンターの拡張やデータセンター間での移動などの対応が行われているが、まだ追いついていないとのこと。 We have put other Datastore projects on hold to dedicate more people to accelerating improvements to Datastore performan

［速報］Google I/Oで発表された4つのポイント：VP8オープンソース化／Chrome Web Store／VMwareとの協業／Google App Engine for Business グーグルは5月19日（現地時間）、米サンフランシスコで開発者向けのイベント「Google I/O」を開催。HTML5を中心としたオープンスタンダードをベースとしたアプリケーションの本格展開と、同社のクラウドをエンタープライズ向けのプラットフォームとするための発表を行いました。1日目の基調講演では次の要旨が語られました。 HTML5が本格的な普及の時期にさしかかろうとしている 動画コーデックのVP8をオープンソース化する Webアプリケーションのマーケットを展開する VMwareと協業し、Javaアプリケーションのクラウドポータビリティを実現する ビジネス向けGoogle App Engineを展

レンタルサーバ大手のさくらインターネットが、先週13日に行った2010年3月期決算説明会の資料の中で、1年以内（2011年3月期中）にクラウドサービスを投入することを明らかにしました。ブログ「P2P today ダブルスラッシュ」の記事で報じられていました。 Amazon EC2に対抗できるサービス 資料によると、さくらインターネットの2010年3月期の決算は増収増益。東京に4カ所、大阪に2カ所のデータセンターを設置し、サーバラック総数は2220ラックとのこと（稼働サーバ台数は資料にはありませんでした）。 さくらインターネットのクラウドはどのようなものになるのか。同社の田中邦裕社長は今年1月のCNET Japanのインタビューで「Amazon EC2に対抗できる日本で初めてのサービスになる」と語っています。 クラウドサービスはぜひやりたいです。ただ、なんちゃってクラウドみたいなものはやりた

ストレージの技術トレンドの1つとして「スケールアウト型ストレージ」に注目しています。ちょうど先週、東京ビッグサイトで「データストレージEXPO」が開催されたので、そこで展示されていたスケールアウト型ストレージをいくつか紹介しましょう。 スケールアウト型ストレージとは？ そもそもスケールアウト型ストレージとは、ストレージを継ぎ足していくことによって柔軟に容量を増やしていけるストレージのことです。 一般にこれまでのストレージは、例えば1台の容量が100GBのストレージを利用していて容量が不足になった場合、もう1台のストレージを新たに追加したとしてもあくまでもそれは100GBのストレージが2台あるということです。1台で200GBのストレージと比べると、データを保存する際にどちらのストレージに保存するかのルール決めが必要だったり、バックアップの手間が2倍になり、またストレージをぎりぎりまで使い切る

Yahoo!が自社内で利用しているクラウドプラットフォームの構築用ソフトウェアを、オープンソースとして来年早々にも公開する予定だと、Registerが記事「Yahoo! to open source floating Google-Amazon crossbreed」で報じています。 ロードバランスとセキュリティを確保した「コンテナ」を提供 クラウドを構築するためのオープンソースソフトウェアとしては、AmazonEC2互換のクラウドを構築できる「Eucalyptus」がすでにありますが、Yahoo!のプラットフォームはEucalyptusのように仮想マシンがむき出しで提供されるのではなく、ロードバランスとセキュリティが確保された「コンテナ」と呼ばれるものが提供されると説明されています。 詳細は不明ですが、開発者は分散処理やフェイルオーバー処理についてはコンテナにまかせることができるようです

リレーショナルデータベースを利用する際には、高い性能を引き出すために物理設計をし、スキーマを工夫し、パラメータのチューニングを行うことがつねに行われてきました。 性能のボトルネックはたいがいHDDにあり、いかにそのボトルネックを回避するかがチューニングのポイントですが、最近では性能向上のための武器として、HDDよりもずっとアクセス性能の高いSSDが注目されています。SSDはHDDと置き換えるだけで、アプリケーションにまったく手を加えずに性能向上を可能にする手段として非常に魅力的です。 HDDの代わりにSSDを利用したら、リレーショナルデータベースの性能はどれだけ向上するのでしょうか？ オラクルと富士通が共同検証を行い、その結果をホワイトペーパーとして先週発表しました（参考「日本オラクルと富士通 フラッシュ技術活用によるデータベース高速化を共同検証」）。 ホワイトペーパーでは、HDDの代わり

新人エンジニアとその先輩たちへ、OJTの前にこの本「ずっと受けたかったソフトウェアエンジニアリングの授業」を 4月に新入社員として入社した新人エンジニアの方々は、早ければそろそろOJTという形で現場にやってきて、若手の先輩社員が新人の教育担当、あるいはOJTリーダーに任命される時期。 そんな新人エンジニアと教育担当におすすめしたい本を今回は紹介します。 プログラミングテクニックの解説は一切なし 一般にソフトウェアの開発は、顧客と相談して仕様を考え、それを外部仕様書、内部仕様書といったドキュメントに落とし込み、プログラミングを行い、ソースコードレビューやインスペクションを行い、単体テスト、結合テスト、運用テストといった工程を経て完成します。いわゆる「Vモデル」と呼ばれるものです。そしてこれらは1つのプロジェクトとしてマネジメントされます。 こうしてみると、ソフトウェア開発の中でプログラミング

セールスフォース・ドットコムの新しいサービス「Salesforce Chatter」が4月15日、同社が東京で開催したイベント「Cloudforce 2 Tour Tokyo」の基調講演で紹介され、日本でも正式発表となりました。 基調講演でSalesforce Chatterを紹介する、セールスフォース・ドットコム プレジデント兼チーフ・セールス・オフィサー フランク・ヴァン・ヴィーネンダール氏 基調講演の内容は、そのちょうど1週間前にニューヨークで開催された米セールスフォース・ドットコムのイベントでマーク・ベニオフ氏が行ったものと同じ内容でした。 セールスフォースが新しいビジョン「Cloud2」を披露、主役は「Chatter」。ソーシャルとモバイル機能をデモ（前編） セールスフォースが新しいビジョン「Cloud2」を披露。「Chatter」によるソーシャルとモバイル機能をデモ（後編） ま

米国時間の4月27日、セールスフォース・ドットコムとVMwareは共同で「VMforce」を発表すると予告しています。ただし、それがどのようなものかについては明かされておらず、発表会のWebページには以下の説明があるのみです。 Join industry leaders Marc Benioff, chairman & CEO of salesforce.com, and Paul Maritz, president & CEO of VMware, for a live Webcast where they will make an exciting joint product announcement on the future of cloud computing. セールスフォースのCEOマークベニオフと、VMware CEOポール・マリッツは、未来のクラウドコンピューティングとな