忘れっぽい自分のために、Google App Engineのリンクリストを自動生成する - When it’s ready.
GAEは、10個前でしかサブドメインが取れない制限がある為、一つのAppIDの中にパスを切ってアプリを複数詰め込むと言う使い方をしている。app.yamlに飛び先を書くだけで、サブディレクトリ以下で完全に分かれて動作するので簡単に作れるくせに、ちゃんと動く。 ただ、簡単にできてしまうためにディレクトリが乱発気味になり、なんというパスを作ったのかが分からなくなる問題があった。（管理出来てなさ過ぎる自分が悪いのだが・・）これが、普通のWebサーバだったらsshで入ってディレクトリ構造見るなりソース見ればいいのだが、Deploy先がGAEだとsshで入る事やソースをDLする事すら出来ない。ちゃんとはじめからLinkの一覧を作っておけばいいのだけど、思いついてババッと作りたい時にイチイチそんなめんどくさい事をやってられない。 GAE上で、app.yamlを読み取ってリンク一覧を作成出来ればいいのだ
gae上でDataStore使わずにmemcacheで転置インデックス作ってみた。 - When it’s ready.
あまりテストをしてないけど、少なくとも100倍くらい速いし、まず時間かけ過ぎで落とされない。これはとても大きい。 以下、コード def uniqueInverseIndex(feed_id, text): try: ngram = NgramTokenizer(feed_id, text) ngram.setNgramArr(2) except: response.out.write('NgramTokenizer make instance is faild') try: for i in ngram.getNgramArr(): InvIndex = InverseIndex.get_or_insert( "_" +i['word_text'], word_text=i['word_text']) InvIndex.feed_id.append(db.Text('%s:%s'%(i['
RSpec on GAE/JRuby - urekatのスカンク日記３
New!⇒ GAE/JRubyグループを作ってみました WEB-INF/spec/spec_helper.rb ENV["GEM_HOME"] = File.expand_path(File.join('..', 'gems'), File.dirname(__FILE__)) require "rubygems" require 'test/unit' require "spec" $LOAD_PATH << File.expand_path(File.join('..', 'lib'), File.dirname(__FILE__)) $LOAD_PATH << File.expand_path(File.join('..', 'models'), File.dirname(__FILE__)) $LOAD_PATH << File.expand_path(File.join('..'
irbからGAEのDataStoreの中身を見たり、GAEアプリをRSpecしたり - urekatのスカンク日記３
New!⇒ GAE/JRubyグループを作ってみました dev_appserver.shを使わずにGAEのローカル環境を作り出して、 irbからDataStoreの中身を見たり、RSpecでユニットテスト書いたりできるようになりました。 WEB-INF/lib/local_gae.rb # jruby -J-cp $GAEJ_HOME/lib/impl/appengine-api-stubs.jar:$GAEJ_HOME/lib/impl/appengine-local-runtime.jar:$GAEJ_HOME/lib/impl/appengine-api.jar local_gae.rb # http://www.okisoft.co.jp/esc/ruby/tut-08.html # http://code.google.com/intl/ja/appengine/docs/jav
Google App Engine上でRubyアプリを動かす手順 - しばそんノート
前置き Google App Engine(以下GAE)では、公式には現在のところPythonとJavaしかサポートされていませんが、JRubyという素晴らしいプロダクトのおかげでJava VM上でRubyスクリプトを実行できるため、考えようによってはRubyも既にサポート対象になっていると言えなくもありません。 実際にググってみても既に結構な量の情報が存在するのですが、どうもJRuby on Railsを対象とした情報が多く、素のRubyアプリケーションを動かすための情報があまり無いように感じました。 Railsももちろん優れたフレームワークなのですが、ちょっとしたアプリケーションを作るのには少々重過ぎますよね…。 ということで、非Railsな、もっとシンプルなRubyアプリをGAE上で動かすための手順を調べてみました。 ポイント 今回は以下の前提で作業を進めていきます。 Railsなど
JavaとPythonで開発可能 企業内データとの連係も
Google検索サービスのインフラストラクチャを基盤にした「Google App Engine」。各種ライブラリやアプリケーション・フレームワークが提供される。データを永続的に保管するサービスがあり，それをデータベースのように利用可能。その一方で，「リクエストの処理は30秒以内」といった制約がある。 米Googleが提供する「Google App Engine（以下，GAE）」は，Webアプリケーションの開発・実行環境を提供するサービスです。基本的にはGoogle検索サービスと同じシステム基盤なので，スケーラビリティに優れた実行環境であるといえるでしょう。GAEの上でアプリケーションを開発する際，何がポイントとなるのでしょうか。その基本を，今回と次回の2回に分けて解説します。 今回はGAEの概要編で，まずGAEの全体像を説明します。そのうえで，開発の手続きと環境，提供されるライブラリとフレ
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
たぶん一番かんたんなRails on GAE/J - ずっと君のターン
rails APPNAME -m http://gist.github.com/103256.txtいろいろまとめてプラギン化した上で、アプリケーションテンプレートもご用意致しました。瀧内さんとこ参考にRailsをjarにまとめてあるのでファイル数制限も余裕で回避。あれこれ結構がんばった。 GAE/Jのアカウントが手に入ったみんなはコレ使って遠慮なくGoogleクラウドでRailsすればいいと思う。手に入ってない人も今のうちに開発サーバーで動かしとけば、5月末のGoogle I/Oできっと一般公開されるよ。 てことで以下手順。 必要なライブラリを入れる GAE/JのSDKとJRubyとRailsとWarblerは流石に事前に必要。この辺参考にどうぞ。すでにこれらが入ってる人はもちろん飛ばしてよし。 一応参考までに自分では試さずに書くけど、多分こんな感じ。 $ svn co http://s
GAE/Pyでbulkloaderを使ってデータをダウンロード／削除する - すぎゃーんメモ
前回は、bulkloaderによるアップロードについて色々調べて試した。 GAE/Pyでbulkloaderを使ってデータをアップロードする - すぎゃーんメモ 今度は、データのダウンロードと削除について調べる。 データをダウンロードする アップロードとほぼ同様に行うことができる。remote_apiへのハンドラ設定などは前回と同じとする。 使用するのはbulkloader.Loaderクラスではなくbulkloader.Exporterクラス。 例えば前回使ったTimeLineというモデルでデータがDatastoreに格納されているとする。 # model.py from google.appengine.ext import db class TimeLine(db.Model): name = db.StringProperty() text = db.TextProperty()
The Python Datastore API - Google App Engine - Google Code
The Python Datastore API The App Engine datastore is a schemaless object datastore, with a query engine and atomic transactions. The Python interface includes a rich data modeling API and a SQL-like query language called GQL. This reference describes the Python API for the App Engine datastore. It has the following sections: Overview Entities and Models Creating, Getting and Deleting Data Keys and
GAE/Pyでbulkloaderを使ってデータをアップロードする - すぎゃーんメモ
bulkloaderとは remote_apiを使ってコンソールからDatastoreにデータをアップロードするためのツール。 初期データとして大量のデータをDatastoreに突っ込んでおきたいときなどに便利。 逆にDatastoreにある内容をダウンロードすることもできる。削除をするようには作られていない？ 今のところPython版のみ。Java版もそのうち出る？ http://code.google.com/intl/ja/appengine/docs/python/tools/uploadingdata.html 簡単な使用例 例えばアプリケーション内で、model.pyというファイルでこんなクラスを作るとする。 from google.appengine.ext import db class PersonalData(db.Model): name = db.StringPro
AmazonのProduct Advertising API認証プロキシ(REST版・GAE用)ソース - 風柳メモ
公開中の認証プロキシエンドポイントAPI RESTを使用しているクライアントアプリケーションの場合、従来のAmazonアソシエイトWebサービスAPI(REST)で使用していた、 http://webservices.amazon.co.jp/onca/xml http://ecs.amazonaws.jp/onca/xml http://xml-jp.amznxslt.com/onca/xml といったエンドポイントを、 http://honnomemo.appspot.com/paproxy http://honnomemo.appspot.com/rpaproxy/jp/ に置き換えることで(クエリはそのまま）Product Advertising APIの認証処理を意識せずとも従来と同等に動作する……はず。 ご自分のGoogle App Engine上で動作させたい場合、以下のソー
Google App Engine 例文辞典
このページは個人的な勉強用として作成しています。一応Google App Engineの例文／サンプルを掲載していますが、あまりよいとは言えないコードが含まれてしまっている可能性もあります。 開発環境はMacOS X (10.5/Leopard) としているため、WindowsやUNIXではサンプルコードは流用できますが、それ以外（画面や手順など）は異なるので注意してください。 カテゴリ内のページのURLは変わることがあります。なるべく、このページから入るようにしてください。なお、Google App Engineに関してはGoogle-App-Engine-Japanを参照するとよいでしょう。 ミスや間違い、リンクエラーなどがありましたらopenspc@alpha.ocn.ne.jpまでお願いします。 Last update : 2009/3/18 2009 古籏一浩(KaZuhiro
Google App Engineのtips集 - スティルハウスの書庫の書庫
（随時更新中です。間違いなどありましたらコメントをお願いします！） このページのtinyurl: http://tinyurl.com/gaetips Datastoreのtips Bigtableの内部構造 BigtableによるDatastoreの実装 Datastoreによるクエリの実装 トランザクションとエンティティグループ Datastoreのtips List Proprtyとmerge joinの使い方 GAE一般のtips GAEのサーバー構成とリクエストの流れ Task Queue APIの使い方 開発環境とプロダクション環境の違い Flex/AIR＋GAEのtips GAE/JにBlazeDSを組み込む BlazeDSの本番環境へのデプロイでハマる Datastore APIの取り扱いでハマる App Engine開発の便利な参考ページ TOPGATEさんのGoogle
ついに無制限に解放されたGoogle App Engine/Java。RoRやPHP、もちろんJavaも試そう
ついに無制限に解放されたGoogle App Engine/Java。RoRやPHP、もちろんJavaも試そう 4月8日に発表されたGoogle App Engine/Java。利用できるのは1万人までと制限がついていたのですが、それが撤廃されてだれでもサインアップして利用できるようになったと、Google App Engine Blogが伝えています。 Google App Engine/Javaは発表されてまだ2カ月と少しですが、はやくもJava VMの上にPHPやRuby、それにJavaのフレームワークなどの実装が行われています。今回はそうしたGoogle App Engine/Javaの活用情報をまとめてご紹介しましょう。 Google App Engineの基礎知識 ITproで、Google App Engineの入門記事が掲載されています。アカウントの取得方法やSDKの入手方
サーバ手配不要！App Engineで動くCMS
期間限定のちょっとしたイベントの告知や、サークルの仲間内で見るような簡単なWebサイトを作りたい。そんなとき、なるべく手軽にサイトを更新できるシステムがあると便利だ。無償で使えるWebサイト更新ツールやCMS（Content Management System）は数えきれないほどあるが、今回は「App Engine Site Creator」を紹介しよう。 App Engine Site Creatorは、Pythonで書かれたオープンソースの簡易CMS。最大の特徴は、その名の通り、グーグルが提供する「Google App Engine」（GAE）上で動く、ということだ。このため、Webサイトを立ち上げるにあたって新たにレンタルサーバを手配したりする必要はない。GAEのアカウントさえ持っていれば、ローカルのテスト環境でApp Engine Site Creatorを使ってWebサイトを構築
GoogleAppEngineでremote_apiを使う s_thx>tmatsuo - When it’s ready.
GogoleAppEngineで、日本語検索作ってたら、転置インデックスの作り方ミスった。簡単に直ったんだけど既にappspot.comで作成された転置インデックスが邪魔なので一気に消したいが、デフォルトのDashBordでは一気に消せるインターフェースが用意されていない。20個ずつポチポチ手で消していたら、寝ようとしていたtmatsu様が救いの手を差しのべてくれた。 「remote api あるお＞http://code.google.com/intl/en/appengine/articles/remote_api.html」 それから色々やって、結局の所動いた。 ローカルのshから、直接Googleのサーバーのデータをいじれる。 実際に操作した物を貼ってみる。 % python appengine_cosole.py a2c-dev App Engine interactive co
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Words by Kenneth
Google App Engine でloggingを使ってログを出力する - すぎゃーんメモ
Google Code Archive - Long-term storage for Google Code Project Hosting.