こっちは本物のMapReduceだ！ グーグルがAppEngine-MapReduceをオープンソースで開発中
こっちは本物のMapReduceだ！ グーグルがAppEngine-MapReduceをオープンソースで開発中 グーグルはGoogle App Engine上でMapReduce処理を実現するオープンソースを開発中だと、先日行われたイベントGoogle I/Oで明らかにしています。プロジェクトのホームページもGoogle Code上に「appengine-mapreduce - Project Hosting on Google Code」として公開されています。 Reduce処理やJava版はこれから 1つ前の記事「グーグルによるMapReduceサービス「BigQuery」が登場。SQLライクな命令で大規模データ操作」では、グーグルがSQLライクな命令を用いて大規模データ処理のサービスを提供することをお伝えしました。 記事でも書いたとおり、これは内部でMapReduceを使っているかど
Task QueueはMapReduceの夢を見るか - スティルハウスの書庫の書庫
いまコーディング中の案件で、Task Queueにぴったりハマる要件があったので、飛びついてみました。 課題：Datasource上の大量のデータをクライアントにダウンロードしたい。30秒内では終わらないので複数のリクエスト／レスポンスに分割してダウンロードする実装にした。しかしデータ量によっては何10分もかかってしまう。 原因：データ量の多さもあるが、それを取得するためのDatastoreのクエリ、および関連エンティティの取得にもっとも時間がかかっている 書こうとしているソリューション：クエリと関連エンティティ取得をTask Queueのタスクに分割して並列処理（map）し、取得したデータを集約（reduce）してクライアントに渡す …んん、これってMapReduceではないですか。1つのリクエストでは重い処理は、たくさんのタスクに細切れにして、キューにどんどん入れる。App Engin
Google App Engineでもうちょっとがんばってみる：メール送信プログラム - builder by ZDNet Japan
さらに深く Google App Engineに関する本特集は、今回が二回目だ。前回は「Hello, World」プログラムを通じて、App Engineにおけるwebappフレームワークの使用方法と設定方法、そしてインターネットに公開する方法を学んだ。今回は、App Engineが持つ様々なAPIの使用方法を学んでいこう App Engineが持つ様々な機能 App Engineは、Webアプリを作成するために頻繁に利用される機能をAPIとして提供している。大まかに分けて、以下のような機能が存在する。 Webアプリケーションフレームワーク データストア Googleアカウントを用いた認証 外部のWebサイトへのHTTPリクエスト メール送信機能 今回は、以下のようなサンプルを作成する過程を学ぶことにする。 Googleアカウントにログインしていない状態でアクセスすると、まずログイン画面へ
[python]Google App Engine使ってみた
おー！ヨスケ氏が既に書いとる。 で、Google App Engine。 今日、なんとなく見た記事に Google App Engine のベータ版が 今日ラウンチするとか書かれてて、しかも、それが 10,000 人 限定とか書かれてる。 [Google Jumps Head First Into Web Services With Google App Engine] http://www.techcrunch.com/2008/04/07/google-jumps-head-first-into-web-services-with-google-app-engine/ こんなおもちゃ逃すわけがねーってことで、速攻エントリー。 「向こう時間の 9 時だよ」って書いてたから、最初行ったときには リンクが切れてたんだけど、向こう時間の 9 時前にはエントリーが 可能な状態になってた。 んで、
![[python]Google App Engine使ってみた](https://cdn-ak-scissors.b.st-hatena.com/image/square/c69e2e5bf8db5d0e45076172a0ead495c758e5ea/height=288;version=1;width=512/https%3A%2F%2Fblog-imgs-41.fc2.com%2Fs%2Fo%2Fr%2Fsora2hs%2Fsora_ts.jpg)
CNET Japan
人気の記事 1Airbnb、屋内監視カメラの設置を禁止へ--4月30日から 2024年03月12日 2新型「iPad Air」「iPad Pro」、3月末～4月に発売か 2024年03月12日 3サムスン、ミッドレンジの「Galaxy A55 5G」「Galaxy A35 5G」を発表 2024年03月12日 4「iPad」2024年モデルはどうなる？これまでの予想と個人的な期待 2024年03月11日 5「Galaxy S24/S24+」レビュー：2週間使って「Ultra」よりお勧めできる理由 2024年02月08日 6米YahooがAltabaに社名変更--日本の「ヤフー」の名称はどうなる？ 2017年01月10日 7「iPhone」の「盗難デバイスの保護」をすべての場所で有効にする方法 2024年03月11日 8「Nothing Phone (2a)」--スタイルよりスペック重視の新
きゅーり.jp: JaikuがGoogle App Engineの最初のアプリとしてリリースされる
買収したWikiエンジンをGoogle Appに乗せたGoogleが、jaikuもGoogle Appに乗せる計画であることが明かされました。 We’ve been working quietly for a while to port Jaiku to Google infrastructure. Today we’re taking off our welding goggles to announce Jaiku will be one of the first apps to run on the new Google App Engine.[From Jaikido Blog | Wroom - we’re moving to Google App Engine] Google AppにてGoogle App Engineというものを構築していて、その中でjaikuがGoogle
Open Service » Blog Archive » Google App Engineを試す（1）
Google App Engineのプロジェクトページ 続くのかどうかは不安ですが。 とりあえずPythonもよくわかっていない（import文があること、インデントが重要ということくらいしか分からない）状態ではじめてみるのですが。Google App Engineのリファレンスを参考にすると、次の機能が使えるようです。 ログインシステム データストア テンプレートエンジン そこでゲストブックを参考に、機能を付け加えてみました。 まずありがちなHello Worldです。 適当な場所にgoogleappsというディレクトリを作成します。 $ mkdir googleapps その中にapp.ymlと言うファイルを作成します。 $ cat googleapps/app.yml ファイルを編集します。内容は以下のようになります。 application: moongift-sample ve
Google のインフラで Web アプリを公開できる！「Google App Engine」 - WebOS Goodies
WebOS Goodies へようこそ！ WebOS はインターネットの未来形。あらゆる Web サイトが繋がり、共有し、協力して創り上げる、ひとつの巨大な情報システムです。そこでは、あらゆる情報がネットワーク上に蓄積され、我々はいつでも、どこからでも、多彩なデバイスを使ってそれらにアクセスできます。 WebOS Goodies は、さまざまな情報提供やツール開発を通して、そんな世界の実現に少しでも貢献するべく活動していきます。 こ、これは・・・ Web 開発に革命が起きようとしているのかもしれません。 Google がその膨大なサーバーリソースを全世界の Web 開発者に開放するべく、 Google App Engine を公開しました！ Google のサーバーファームで透過的に負荷分散される Python ベースの Web アプリケーションサーバーに、 Google が誇る分散データ
Google App Engineはやっぱりすごいのまとめ (CodeZine編集部ブログ)
久次です。 遂に出ましたが、Google謹製の仮想サーバー環境「Google App Engine」がやはり開発者界隈で話題の模様です。編集部でも早速いくつかアカウントを登録してみました。 Google App Engine - Google Code また、すでにブロガーさんがいくつか入門記事をアップされています。 秋元@サイボウズラボ・プログラマー・ブログ: Google App Engineを使ってみた Google App Engine で Tropy っぽいやつ作ってみた - IT戦記 Google のインフラで Web アプリを公開できる！「Google App Engine」 - WebOS Goodies TechCrunch Japanese アーカイブ » 体験ルポ「Google App Engineでアプリを作って公開してみた」 こちらはニュース的なところ。 Goog
俺も俺も！ Google App Engine！ - IT戦記
これを見て Google App Engine SDKを使ってみた | 秋元@サイボウズラボ・プログラマー・ブログ 俺も俺もやりたいよ＞＜ ってことで骨髄反射的に 今からインストールするよ！ ダウンロード完了 インストーラ起動 ひたすら「continue」 インストール先選んで パスワード入れて はい、完了 Getting Started でも読むか Google App Engine Documentation | App Engine Documentation | Google Cloud Hello world できた リアルにドキュメント読みながらやったので低速です。 早送りしながら見てね＞＜ Hello world がこんなに簡単でした。 ちょっと partty.org を使いやすくするため jabanner をインストールします。 http://www.coins.t
Google App Engineは罠じゃないか？
「Google版EC2欲しいよねー」と昨日チャットで話していたら、いきなりGoogle App Engineがリリース。夢かとオモタ。 Google App Engineは、Googleが一般ユーザに提供するGoogle製サーバ環境。Googleが検索やgmailに使っている環境と同じ環境が使えるらしい。 Googleの舞台裏とも言える、GoogleのファイルシステムGFSや、超大容量データベースのBigtableが自由に使えるのは、非常に楽しそう。クロール用APIまで標準で提供されているのが、Googleらしい。 ただし、Amazon EC2とは違い、LinuxなどのOSを解放するのではなく、言語環境だけが提供されている。 いま公開されているのは、Pythonだけ。なので、Pythonで書かれたアプリケーションしか対応しない。 ほかの言語も対応する予定らしい。 MySQLとかPostgr
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
