Javaにvariant型を実装した - ＊「ふっかつのじゅもんがちがいます。」withぬこ
最近Hadoopを使うために5〜6年ぶりにJavaをいじっています。 そんで、ちょっとばかり耐えがたいわけです。 例えばありがちな例題を挙げると、 ["google", "検索","開発"] のようなタグ(文字列)のリスト(でも配列でもなんでもいい)を受け取って [ {tag=>"google", enc=>'google'}, {tag=>"検索", enc=>'%E6%A4%9C%E7%B4%A2'}, {tag=>"開発", enc=>'%E9%96%8B%E7%99%BA'} ] のようなハッシュテーブルのリストに変換しなさい。 ただしパーセントエンコーディングを行う関数(でもメソッドでもなんでもいい) uri_encodingは与えられているものとする。 こんなこと、Webアプリケーションではよくやるじゃないですか。 んで、実際Perlなんかでは結構簡単に書けて #my @tag
GWT/GINの勉強にも。Google App Engine上で動作するシンプルなタスク管理·My todo list everywhere MOONGIFT
My todo list everywhereはGoogle App Engine/Java向けに作られたシンプルなTodo管理システム。 My todo list everywhereはGoogle App Engine/Java製のオープンソース・ソフトウェア。なぜ世にはこうもタスク管理システムが多いのか。テキスト、Web、携帯電話、スマートフォン、自作などなど実に多様なタスク管理が存在する。それでもまだ新しいタスク管理が登場する。 タスクリスト 完成形はもはや求めてはいけないのだろう。自分のスタイルにあったものを選び、使い続けるのが大事なのだ。プログラマーであればそう、自分で好みに仕上げられるものが良いだろう。Java使いであればMy todo list everywhereを試してみよう。 My todo list everywhereはGoogle App Engineを使うこと
Java開発者が知らないと損するPaaSクラウド8選
Java開発者が知らないと損するPaaSクラウド8選：ユカイ、ツーカイ、カイハツ環境！（25）（1/3 ページ） 進化・激変するJavaクラウドの現状を知る、まとめ 本連載「ユカイ、ツーカイ、開発環境」では、Javaが利用できるクラウドコンピューティングのPaaS環境について、いくつか紹介してきました。最近では、レッドハットの「OpenShift」とヴイエムウェアの「Cloud Foundry」などのPaaSクラウドのβサービスが提供され始め、また、いままで紹介した各クラウドの事情も変わってきました。 本稿では、Javaで利用できる以下の8つのPaaSクラウドの最新動向をお届けします。 機能を拡充し続ける「Google App Engine」 「Stax」はCloudBeesに買収され「RUN@cloud」に Morphの「AppSpace」は「mCloud」に .NETだけじゃない「Wi
【コラム】攻略! ツール・ド・プログラミング (52) Googleが開発した高速圧縮ライブラリ「Snappy」をJavaで使う | エンタープライズ | マイコミジャーナル
「Snappy」はGoogle社が開発した高速圧縮/伸長(解凍)ライブラリである。もともとは「Zippy」という名称で知られていたものだが、BSD Licenseに基づいてオープンソース化され、誰でも利用できるようになった。ZippyはBigTableやMapReduceから内部的なRPC処理にいたるまで、Google社内のあらゆるプロジェクトで利用してきた実績を持つ。 Snappyの最大の特徴は、圧縮/伸張の実行速度である。シングルコアのIntel Core i7プロセッサにおけるベンチマークでは、圧縮で毎秒250MB以上、伸張で毎秒500MB以上の性能を実現しているという。一方で圧縮率はzlibやLZOといった主要なツールよりも劣る。圧縮率はプレーンテキストで1.5から1.7倍、HTMLで2から4倍、JPEGやPNGといった圧縮済みのファイルフォーマットでは1.0倍となっており、これは
App Engineで動く並列処理フレームワーク ElShard - GeekFactory
App Engineで大量のデータを並列処理するフレームワーク ElShard を作っています。batch addとdeleteのサンプルができたので、とりあえずまとめてみます。 ElShardは、入力リストを分割して処理して集約する考え方に基づいています。並列処理はApp EngineのTaskQueueで実現しています。タスク間では10kBのペイロードしかやり取りできないため、データをやり取りする用途には適していません。そのため、実際のデータはDatastoreに格納しておき、キーをタスク間でやり取りすることになります。 現段階では集約をどうやって実現するか未定ですが、キーでソートされるというDatastoreの性質をうまく利用できる気がします。Matcher APIが使えるといいなぁ。 リストを処理する ElShardでは、InputとTaskの2種類のタスクを組み合わせてジョブネッ
Java: Picasa APIにアクセスする方法のまとめ | 自転車で通勤しましょ♪ブログ
GAE for Javaで、Picasa APIにアクセスする方法を調査していました。 画像をメインにするようなサイトをGAEでやると、データストアにデータを置くと無料領域まですぐにいってしまうだろうし、なによりOutgoing Bandwidthを使い果たしてしまう（というか使い果たした…）ので、ファイルやよく使うバイナリデータは外に置いたほうがいいです。そのため、データ置き場としてPicasaを使ってみようかなと思った次第です。 まぁこれといってGAEだからということもないのですが、多少トラブったので、メモ代わりに残しておきます。 Google Data ProtocolにアクセスするためのClient Libraryをダウンロード。こちらより。 Client LibraryのPicasawebServiceでGoogle Loginを行ったところ、エラーが発生した。ぐぐったら原因がわ
Song of Cloud: SDK 1.2.8 Release Notesで語られなかったこと
先日App Engine SDK 1.2.8 for Javaがリリースされました。 公式のリリースノートに記載されていない非常に重要な機能追加がありますので、ここで紹介します。基本的にすべてデータストアのお話です。しかもLow-Level API。 ご指摘いただきまして、ミスリードしそうな個所について修正しました。今後もわかったことがあれば追記していく予定です。 プロダクション環境でカーソルが予想外の動きをしました。このため、開発環境と両方で動くコードに更新しました カーソルの追加 これまでデータストアでページング処理を行う場合には、ページング用のプロパティを用意したり、ページング用のインデックスを用意したりと、様々な力技が提案されてきました。 しかし、今回のアップデートでCursorという「クエリの現在位置を覚えておくオブジェクト」がひっそりと追加されました。これを利用すると簡単にペー
MacOS XのJavaアップデートとAppEngine SDKの問題に対処した - rabbit2goのブログ
MacOS XにてJava SE 6 Update 4 for Mac OS Xを適用して以来、AppEngineのSDKを使おうとするとdev_appserverの調子が悪い。どういう訳か不明だが、SDKとの相性が悪いようだ。次のSDKのアップデートで直るとは思うけど、現在進んでいる開発が進められずに困っている人も多いはずだ。 ログイン - Google アカウント 既に、OpenJDK1.7を使うという対策案が紹介されている。 404 shin1のつぶやき ないわー Not Found: MacOS Xのアップデート後 #appengine javaで開発サーバが動作しない件 この方法をとっても良いのだけど、JDKの入れ替えは少々面倒だ。もう少し簡単な方法がないかと思っていたら、Issue 4712へのコメントとして、JavaForMacOSX10.6Update3.dmgをインストー
「完全にフリーな Android」を作る IcedRobot プロジェクト | スラド オープンソース
完全にフリーな Android を作る「IcedRobot」なるプロジェクトが進んでいるらしい (fosdem.org の記事、本家 /. 記事、InfoQ の記事) 。 Android の Dalvik VM には Java 由来の技術が採用されており、それが Oracle の著作権を侵害しているとして Google が Oracle に訴えられる事態になっている。IcedRobot は OpenJDK といったフリーな Java 技術を利用することで、完全にフリーな Android 互換環境を作るということが目的とのこと。 IcedRobot は GNUDroid と GNUBishop と呼ばれるサブプロジェクトから構成されるとのことで、GNUDroid はフリーソフトウェアコンポーネントによる Android 実装、GNUBishop は Android にデスクトップ機能の標準的
Googleが開発したJavaデバッグを簡単にする新技術「cofoja」 | エンタープライズ | マイコミジャーナル
Java Programming Language Googleの20%プロジェクトからJava向けの新しい技術「cofoja (Contracts for Java)」が公開された。既存の実装に大きく手を加えることなく、デバッグをより簡単にしてくれる効果が期待できる。バグは些細なコードが起こすものだったりするが、それを追跡して発見するのは時に困難を極める。これは問題が発生した箇所と、実際にバグがある箇所が大きく離れていることが理由になっていることもある。問題発生箇所とバグ発生箇所を近くにまとめることができれば、それだけバグ発見も取り組みやすくなる。 cofojaはこれを簡単に実現するための技術。インタフェースに制約表現を追加可能にするところがポイントとなっており、クラスの実装に手を加えなくてもインタフェースに制約表記を追加することで実行時にチェックできるようになる。ブログに掲載されている
GoogleのMapReduceアルゴリズムをJavaで理解する
GoogleのMapReduceアルゴリズムをJavaで理解する：いま再注目の分散処理技術（前編）（1/2 ページ） 最近注目を浴びている分散処理技術「MapReduce」の利点をサンプルからアルゴリズムレベルで理解し、昔からあるJava関連の分散処理技術を見直す特集企画（編集部） いま注目の大規模分散処理アルゴリズム 最近、大規模分散処理が注目を浴びています。特に、「MapReduce」というアルゴリズムについて目にすることが多くなりました。Googleの膨大なサーバ処理で使われているということで、ここ数年の分散処理技術の中では特に注目を浴びているようです（参考「見えるグーグル、見えないグーグル」）。MapReduceアルゴリズムを使う利点とは、いったい何なのでしょうか。なぜ、いま注目を浴びているのでしょうか。 その詳細は「MapReduce : Simplified Data Proc
Google App Engineでシリアライズのチューニング - kissrobberの日記
GAEアプリって結構Objectのシリアライズ使うことあるよね？（俺だけ？） 転置インデックスとか、ビュー（クエリの結果をまるごとシリアライズして1エンティティに保持してるやつ）とか、 結構いろいろと使ってるんだけど、微妙に遅いので速くならないかなーと。 Javaの標準シリアライズ以外に、シリアライズのライブラリって色々あるみたいです。 Apache Thrift GoogleのProtocol Buffer http://code.google.com/intl/ja/apis/protocolbuffers/ HadoopのWritable Message Pack http://msgpack.org/ 等 んで、速そうな奴＆簡単に使えそうな奴って事で、 HadoopのWritableと、Message Packを試してみました。 サイズ的には、 Java標準 > HadoopのWr
Scala で Google App Engine - hidemonのブログ
Scalaのプログラムは，かなりそのままJavaのクラスファイルとなるので，Google App EngineのサーブレットをScalaで書けるんじゃないかと思っていたが，やってみたら，すごく簡単に書けた． 方法は，こちらのサイトを参考．Eclipseのプラグインを使う． 準備 下記の手順で環境をセットアップする． Google App Engine のプラグインをEclipseに導入する． ScalaのプラグインをEclipseに導入する．方法は，こちら． App Engineのプロジェクトを作成する． パッケージエクスプローラのプロジェクト名上で，右クリックでコンテクストメニューを出し，Scala-> Add Scala Natureを選択．これによって，作成したプロジェクトでScalaが使えるようになる． ここまでで，App Engine開発サーバでScalaが実行できるようになる．
tdtshのブログ » GAE java (Google App Engine) 上でのOpenID と まとめ
Google App Engine (java) まとめ Java で OpenID を扱う情報って少なくないですか？ – イトウ アスカ blog 少ないですね。ひっしで集めてます。 Tsukuyomi OpenID – このプロジェクトについて Implement OpenID consumer in App Engine (Java) – Google App Engine | Google グループ 前から何となく疑問に思っていた。 Google App Engine (Java) で OpenIDを動かすにはどーすれば？ openid4javaはソケットを使用するけど、GAEのJREサンドボックス上では使え ない。故に動かない。 こんなのがあるらしい。 dyuproject – Project Hosting on Google Code java REST framew
409 Conflictにより、Google App Engine/J にDeployが出来ない - two-strokeの日記
GAE/Jですが、突然Deployが不可能になってしまいました。 Deploy失敗時にGoogle Eclipse Plugin が出力したログを見ると、appcfg.pyのrollbackコマンドで幸せになれるという情報が見てとれますが、 Python版をインストールする気は無いので、もうしばらく解決方法を探そうと思います。 Unable to upload: java.io.IOException: Error posting to URL: http://appengine.google.com/api/appversion/create?app_id=xxx&version=1& 409 Conflict Another transaction by user xxx is already in progress for this app and major version. Th
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
guava-libraries - Project Hosting on Google Code
はてなブログ | 無料ブログを作成しよう
http://jsonengine-sample.appspot.com/bbs-sample/index.html
Google Code Archive - Long-term storage for Google Code Project Hosting.
Google Code Archive - Long-term storage for Google Code Project Hosting.