[GAE] Google App Engine/Python の Datastore での検索について | Pythonコード帳
Google App Engine/Python の Datastore での検索について調べたのでメモ。 前提知識：GAE/Pythonでの検索について そもそも、GAEのデータストアはRDBのLIKE検索をすることが現状、できません。 なので、全文検索、部分一致検索はできなくて、検索は「完全一致検索」のみとなっています。 しかし、工夫次第で「全文検索」や「部分一致検索」を実装することができるみたいです。 ・前方一致・後方一致・完全一致検索 GAE/Pythonで全文検索を実装した記事 全文検索（ぜんぶんけんさく、Full text search）とは、コンピュータにおいて、複数の文書（ファイル）から特定の文字列を検索すること。「ファイル名検索」や「単一ファイル内の文字列検索」と異なり、「複数文書にまたがって、文書に含まれる全文を対象とした検索」という意味で使用される。 ・引用元：
Unicode で萎えそうになったとき(orz)に思い出してほしい5つのこと - Solr, Python, MacBook Air in Shinagawa Seaside
通常の CGI では環境変数 LANG や sitecustomize.py なんかで なんとなくごまかせていた Unicode と UTF-8等 の使い分けも Google App Engine ではキチンと処理してあげないとエラーになっちゃいます。 コーディング中に下のメッセージが出て、萎えた方も多いんじゃないでしょうかorz。 UnicodeDecodeError: 'ascii' codec can't decode byte 0xe5 in position 33: ordinal not in range(128) ボクもこいつにかなり体力と集中力を消耗させられました。 開発環境のdev_appserver.pyではエラーにならなくっても、Google App Engine にアップロードした後に実行するとエラーになったりすることもあるんですよねー。 以下はボクが試行錯誤の中で
Google App EngineのアプリケーションにBasic認証を設定する - 偏った言語信者の垂れ流し
最近仕事で Google App Engine を使う機会が増えてきてて、今更ながらまともに使い始めました(公開初日から触ってたのになー 作りかけのアプリケーションで、とりあえずアップロードするけど、公開までは全体にBasic認証かけときたいなーなどということが多い。 ググればやり方はいくつか出てきたけど、良さそうなのがなかったので自分でも書いてみた。 basicauth.py AUTH_RESPONSE_BODY = """<!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN"> <html> <head> <title>401 Authorization Required</title> </head> <body>401 Authorization Required</body> </html>""" def auth_required_a
Google App Engine / Python 上での開発で最初から知ってればよかった、ってことをいくつか - Masatomo Nakano Blog
ここ数ヶ月、Google App Engine/Pythonを使い、初めてちょっとしたものを作ってみているのだけど、開発初期から知っておけばよかったなー、と思うノウハウ/tips的なものをずらずらと書いてみる。 基本的な環境設定は、 以前書いた まま。 0. 公式ドキュメントを良く読む 言うまでもなく、だけど、 マニュアル はもちろん、 この辺 の下の読み物も、流し読みだけでもしておいたほうがいい。 datastoreとmodel的なところ 1. key nameを使いこなす key nameは、レコードの作成時に指定できる(RDBでいう)primary keyの別名みたいなもの。primary key自体は自動的で作成されるので開発者が指定できるのはkey nameだけ。 key nameをうまく使うことで、datastoreを使いやすくすることができる。特にdatastore上で"un
GAEでPythonを始めるときに知りたい4つのまとめ
if ( $blog == " Webエンジニアのためのライフハック " ) { print " 1-byte.jp "; } ホーム1-byte.jpとは 書いてるヒトは 最近、とても気になっていることがあります。 それが”Google App Engine + Python”です。 元々、Pythonには興味がありました。 オライリーのPython入門も読破しました。 10日でおぼえる Python 入門教室も5日まではやりました。 しかし、そこで終わりました…。 CakePHPという慣れ親しんだ言語とフレームワークがあったので、そちらに走ってしまいました。 ですが、私はPythonistaに憧れるPHPerです。 ここいらで一つ、重い腰を挙げてPythonの勉強を始めることにしました。 Pythonを勉強する一つの強い理由付けとして、”Google App Engine“の存
GAE/Python で Twitter bot を作る(準備編) - SPEAKER BREAKA
先のエントリで bit.ly API モジュールやら Stack Stock Books API モジュールを作ったので、Google App Engine 上で動作する Twitter bot を作ってみます。 先のエントリとやらはこの辺です。 bit.ly API モジュール Stack Stock Books API モジュール どんな処理にしましょうか？ ざっくりとこんな感じで。 Stack Stock Books から最新のつぶやき取得 Datastore に保存した前回のつぶやき情報と比較 新しい情報ならば、Twitter への投稿文言生成 Twitter へ投稿 Datastore に最新つぶやき情報を登録 これらの処理を一定間隔で回す ということで、URL 的にはこんな感じに。 /：紹介文でも表示しましょう /ssbbot/mumble/update/：cron がここを叩
gae/pythonでの全文検索の現状のbest practice
Either email addresses are anonymous for this group or you need the view member email addresses permission to view the original message 鈴木と申します。GAE/Pythonで開発しておりますが、全文検索の実装について お知恵を拝借できればと思います。 現状、以下のように全文検索を実装しています。 Yahoo形態素解析で検索対象の文章を分かち書き ↓ StringListPropertyにわかち書きした単語を保存 ↓ StringListPropertyにfilterをかけて検索 １キーワードの際にはこれで特に不便はないのですが、 やはり複数ワードでの検索も実装したいと思います。 ２キーワードまでであれば、同じStringListPropertyに対してfi
【無料】GAE使ってみない？【無広告】 « python練習帳
みなさん、Google App Engineって聞いたことありますか？ あっ、それしってる。Google Docsとかでしょ？って思った方。惜しいけど違います。 Google App Engineとは、Googleが運営している宇宙最強のデータセンタを、一定量まで無料で使える仕組みなのです。 ほんとに無料なの？ Google App Engineを使って無料でサイトを立ち上げる方法にもありますが、無料割り当て分(Free Quota)だけで、かなりの規模のサイトを運営できます。1日の通信量が1GBまでなら基本的にお金はかかりません。100kB/pvとして、1日1万PVまで無料です。個人運営のサイトなら、たいていは無料利用分で足りるのではないでしょうか。 プログラム必要なんでしょ？ Google App Engineを使って無料でサイトを立ち上げる方法の方法を使えば、プログラムを一切書かずに
簡易Twitterクライアント作ってみた。GAE/Python « python練習帳
昨夜、OAuthでの認証がうまくいったので、今日はTwitterのTLの取得と発言を実装してみた。 お試し環境 → http://nisetwitter.appspot.com/で公開している。 エラー処理を全く記述していないので、API呼び出しに失敗すると、生のエラーメッセージが出力されてしまう。 ソースコード 昨日のGAE/PythonでOAuthのソースコードの、MainHandlerを数行書き換えるだけで作成できてしまった。 12行目 テキスト入力フォームを表示 13行目 タイムラインを取得 14行目～16行目 タイムラインを表示 21行目 発言を登録 22行目 元の画面にリダイレクト class MainHandler(RequestHandler): """Demo Twitter App.""" def get(self): client = OAuthClient('twi
GAE/PythonでOAuth « python練習帳
GoogleAppEngine / Python環境で、TwitterのOAuthを使ってみた。 1. TwitterのAPI利用申請 Twitterのアカウントを取得し、API利用申請をします。 Twitterのアカウントを取得します Twitterにログインします 以下のアドレスにアクセスします https://twitter.com/apps 新しいアプリケーションを追加をクリックします アプリケーションの情報を入力して登録します ※コールバックURLは、GAEのIDがXXXの場合は、http://XXX.appspot.com/oauth/twitter/callback とします。 以下の２つの値をメモします Consumer key pQcelwAEib60BhEoE52*** Consumer secret ******* 2. サンプルアプリをデプロイ すぐ動作するサンプル
Google App Engine(Python)で動的にCSVファイルを作成してダウンロードさせる
山本隆の開発日誌 Kotlin/Swift/Flutter/JavaScript/TypeScript/PHPでWindows/macOS/Android/iOS/Webアプリなどを作ってます Google App Engine(Python)で動的にCSVファイルを作成してダウンロードさせる方法。 今回の例ではGoogle App Engine用フレームワークKayを使用しています。 CSVファイルを作成するにはcsvモジュールのWriterオブジェクトを使用します。 import csv … writer = csv.writer(data) Writerオブジェクトのコンストラクタの最初の引数は、ファイルライクなオブジェクトをとります。 ここではStringIOを使用します。 import StringIO data = StringIO.StringIO() csvファイルのデータ
GAE用のOAuthライブラリ simpleoauth-gae を作ってる - たごもりすメモ
ある人の発言から時事ネタサービスを作ろうと思いたったわけだが、TwitterとのOAuthまわりでハマりにハマって、結局有りモノに手を入れてしまったのでその話。 結論からいくと、使いやすい(と自分では思っている)ライブラリに修正して公開しましたよ、ということで。 simpleoauth-gae - Simple OAuth Library for GAE Environment - Google Project Hosting あれこれ調べる、試す Twitterに対してOAuthやろうと思うと思ったが、dev.twitter.comでPython用として紹介されているのは以下のライブラリ。組み合わせて使う。 python-oauth oauth-python-twitter2 前者 oauth2(python-oauth) が汎用的なOAuth用のライブラリで、後者 oauthtwitt
Google App Engine 上で認証が必要な Google Data Feeds を取得する方法
Jeff Scudder, Google Developer Programs April 17, 2008 翻訳 Takashi Matsuo <tmatsuo@shehas.net> 2008年6月5日, 2008年7月3日更新 はじめに みなさん Google App Engine をどのように使おうか、ワクワクしながら考えをめぐらせている事と思います。中には私たちの Google Data AtomPub API を使って Google の他サービスと連携するようなアプリケーションを作ろうとしている方もいるでしょう。Google のサービスの一部は GData API を準備しており(面白そうな例として YouTube や Google Calendar、Blogger などがあります。完全なリストはここにあります。)、その API を使う事によりユーザ固有のデータを読み出した
アニメDVD&CD千夜一夜: Google App Engine
そんな訳で、細々とGAEを使って深夜アニメの番組変更情報を 作り出しているのですが、なんとなーく思い立って その情報をGoogleカレンダーに登録出来るようにしてみました 変更情報のページにGoogleカレンダーへのリンクを作り そこからどかんとカレンダーに追加する仕組みです で、実現するまでに色々と苦労したので、ハマった点とかを 振返り日記として残しておきます Google App Engine からGoogleのサービスを利用するには gdata-python-clientってのが必要で、これはGoogleから ダウンロード出来ます 展開したフォルダのsrc/atom、src/gdataを自分のGAEアプリの ソースフォルダにコピーして準備は完了です さて、Googleのサービスを使用する以上、Googleにログイン しなければならないのですが、まずここで詰まりました GAEからGoo
Google Calender API | feedの取得
Google Calendar の予定などをApp Engine上に読み込むためには Google Data Library（GDATA）というものを使用します。 【GDATA Python Client Library】のダウンロードhttp://code.google.com/p/gdata-python-client/2010年8月13日現在、最新版は2.0.11です。 →ファイルをダウンロードしたら展開し、「src」フォルダ内の「gdata」「atom」の2つのフォルダを、自身のアプリケーションのプロジェクトフォルダのルートにドラッグ&ドロップで移動してください。 このデータの取得方法において、まず始めにやらなくてはならないことが、「ユーザの許可を得る」ということです。 このユーザの許可を得る方法としては ・アクセスするユーザのアカウント名／パスワードをあらかじめ ソースにハ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Google Issue Tracker
Google App Engine 入門
Google Code Archive - Long-term storage for Google Code Project Hosting.
Blog - Mikula Beutl - SEO Consulting
糖心vlog二维码 - 曼哈顿夜曲