グーグル、フル機能のMapReduceをGoogle App Engineで提供へ
グーグルは同社のクラウドサービスであるGoogle App Engineで、フル機能のMapReduce機能を提供することが同社のイベントGoogle I/O 2011で明らかにしました。 これまでGoogle App EngineではMapReduceを構成する「Map」「Shuffle」「Ruduce」の3つのうち、Mapperの機能の提供が行われてきました。 Google I/O 2011で行われたセッション「App Engine MapReduce」では、MapReduceを構成するすべての機能の提供が行われることが発表されています。 セッションのポイントを紹介しましょう。 App Engine MapReduce App EngineエンジニアリングチームのMike Aizatsky氏。 MapReduceは数年前にグーグルが開発した処理。社内ではほとんどあらゆるチームがこの処理
ゆーすけべー日記
サキとは彼女の自宅近く、湘南台駅前のスーパーマーケットで待ち合わせをした。彼女は自転車で後から追いつくと言い、僕は大きなコインパーキングへ車を停めた。煙草を一本吸ってからスーパーマーケットへ向かうと、ひっきりなしに主婦的な女性かおばあちゃんが入り口を出たり入ったりしていた。時刻は午後5時になる。時計から目を上げると、待たせちゃったわねと大して悪びれてない様子でサキが手ぶらでやってきた。 お礼に料理を作るとはいえ、サキの家には食材が十分足りていないらしく、こうしてスーパーマーケットに寄ることになった。サキは野菜コーナーから精肉コーナーまで、まるで優秀なカーナビに導かれるように無駄なく点検していった。欲しい食材があると、2秒間程度それらを凝視し、一度手に取ったじゃがいもやら豚肉やらを迷うことなく僕が持っているカゴに放り込んだ。最後にアルコール飲料が冷やされている棚の前へ行くと、私が飲むからとチ
グーグルによるMapReduceサービス「BigQuery」が登場。SQLライクな命令で大規模データ操作
「数兆件のデータも対話的に、高速に分析できる」。グーグルは5月19日にこのような表現で新しいサービス「BigQuery」の登場を紹介するエントリを、ブログにポストしています。 グーグルが公開したBigQueryは、Hadoopやデータウェアハウスなどを用いて多くの企業が行おうとしている大規模データ（いわゆる「Big Data」）の分析を、グーグルのクラウドで可能にします。利用者はGoogle Storage経由で大規模データを転送し、SQLライクな命令によって抽出や分析を行います。 まるでグーグルが大規模データ処理のMapReduceをホスティングし、その機能をサービスとして提供するようなものがBigQueryといえます（ただし公開された「BigQuery」の説明には、内部でMapReduceを利用しているのかどうかの記述はないのため、MapReduce「的」なサービスと表現すべきかもしれ
システムの納期とは確率分布だ − Publickey
昨日はIBMのラショナルソフトウェアカンファレンスに参加しました。1日中、ソフトウェア開発方法論に関するセッションを聞いていたのですが（最後のセッションは、自分が司会のパネルディスカッションでもありましたが）、その中で最も印象的だったウォーカー・ロイス氏のプレゼンテーションを紹介したいと思います。 ウォーカー・ロイス氏はIBMラショナルソフトウェア部門のバイスプレジデントで、アジャイル開発手法としてよく知られるRUP（Rational Unified Process）の創始者でもあります。彼の講演は、この日の基調講演の1つでした。
明日、ついにGoogle Waveが10万人に公開
米国時間の9月30日、日本時間では明日の深夜以降になりますが、いままで一部の開発者しか入手できなかったGoogle Waveのアカウントが、約10万人に対して発行されることになっています。 これにより、Google Waveに興味のあるほとんどすべての人が、実際にGoogle Waveを試せるようになります。 このことは7月20日付けのGoogle Wave Developer Blogで明らかにされていました。 this morning we announced that we plan to start extending the Google Wave preview beyond developers on September 30th.（略）and we plan to involve about 100,000 users. アカウントの発行は、「Google Wave」のホー
Google Analyticsのデータからアクセスランキングを生成するPerlスクリプト
当ブログ「Publickey」でアクセスランキングの表示を始めました。そのために作成したPerlのコードを、せっかくなので公開します。 作成したのは、Google AnalyticsからAPI経由でランキング情報を取得して、それをHTML形式で出力するPerlのコードです。 この方法が優れている点は、統計処理済みのランキング情報をGoogle Analyticsから取得するためWebサーバにほとんど負荷がかからない点です。Perlのコードもシンプルで導入は容易だと思います。 コードは、「Using Perl for Google Analytics API « Patrick Hartman's Log」を基に、不要な部分の削除や変更を行ってシンプルにし、HTMLの出力部分などを追加したものです。ただし僕はPerlのプログラミングの知識があまりなくマニュアルを見ながらコードをいじったので、
レッドハットも「メタクラウドAPI」に参入。クラウドAPIの競争が燃え上がる
レッドハットが、先週行われた同社のイベント「Red Hat Summit」で同社の新しいプロジェクト「δ-cloud」（デルタクラウド）を発表しました。 δ-cloudは、Amazon EC2、RackSpace、VMware ESX、そしてRed Hat Enterprise Linuxに内蔵されたKVMなどのさまざまな「クラウドの基盤となっている仮想マシン」をREST形式の共通APIを用いて管理することを目指しています。 いわばメタクラウドAPIを作ることが目標といえるでしょう。 レッドハットのCTOであるBrian Stevens氏は、δ-cloudの発表に触れた同社のブログエントリ「Introducing Deltacloud」で次のように書いています。 Today each infrastructure-as-a-service cloud presents a unique A
9月から新学期！ スタンフォード、MIT、バークレイのコンピュータサイエンス講座をYouTubeで受講しよう
日本では9月といえば2学期の始まりですが、米国では9月が新学期のスタート。留学したつもりで海外の大学で行われているコンピュータサイエンスの講座を受講するのはいかがでしょうか？ YouTubeは今年の3月から、大学が公開している講義の動画を集めた「YouTube - EDU」コーナーを開始しました。スタンフォード、ハーバード、マサチューセッツ工科大学（MIT）、カリフォルニア大学バークレイ校（UC Berkeley）、そのほか多くの大学の講座が無料で見られます。 内容はコンピュータサイエンスに限らず、政治、経済、著名人のオピニオンなどが幅広くカバーされています。 YouTube Eduには大量の講座が蓄積されているのですが、自分に興味のある講座を探してそれらを見るには、検索を繰り返したり授業ごとに分割された動画を順番に探したりと、少々手間がかかります。 そこで、ITエンジニアの方が見て役に立
コミックで読む、XHTML2の開発中止とHTML5登場の意味 「マークアップ言語の誤解を解く」
W3Cは7月2日に、XHTML2の開発を中止しHTML5の開発に注力する、という発表をしました。この先、XHTMLはどうなってしまうのか？ そしてXHTMLとHTMLの関係はどうなっているのか？ という疑問に答えるための分かりやすい解説がコミックで描かれています。HTML5の解説にもなっていて、HTML5に興味のある方には一読をお勧めします。 "Misunderstanding Markup" 日本語訳 もともとこのマンガは、WebデベロッパーであるJeremy Keith氏のブログのエントリ「Adactio: Journal--Misunderstanding markup」を、WebデザイナーのBrad Colbow氏がコミックに描き起こして、Smashing magazineの記事「Misunderstanding Markup: XHTML 2/HTML 5 Comic Strip
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
[memo]Blog引っ越しました。 - “南船北馬”