datastore のデータをダウンロード/アップロードする - NOSIX
Google App Engine で開発。第八弾。 GAE python27 です。 データの download(dump)/upload(restore) には bulkloader を使います。 app.yaml にて remote_api の使用を宣言します。 builtins: - remote_api: on bulkloader.yaml ファイルを作成します。appcfg.py を使ってひな形を作成できます。 $ cd ANY_DIRECTORY $ appcfg.py create_bulkloader_config --filename=bulkloader.yaml --url=http://localhost:8080/_ah/remote_api --application=dev~your-application-id APPLICATION_ROOT 上記は開
『09.Google App EngineとBigQuery 実践編(2/3)』
・08.Google App EngineとBigQuery 導入編(1/3) ・09.Google App EngineとBigQuery 実践編(2/3) ・10.Google App EngineとBigQuery ノウハウ編(3/3) CA Beat エンジニアリーダーのヤマサキ(@vierjp)です。 前回の続きで「09.Google App EngineとBigQuery 実践編(2/3)」です。 「08.Google App EngineとBigQuery 導入編(1/3)」で クエリを実行するための環境は整ったので、 今回はRDBとの違いも含めたクエリの構文や関数をご紹介しようと思います。 ○クエリの実行方法や関数の紹介 ・SELECT 「SELECT * FROM ~」という書き方はできません。個別にカラム名を指定する必要があります。 BigQueryでは条件指定も含め参
GoogleAppEngineのデータをGoogleBigQueryで扱ってみる
今回は再びGoogleAppEngine。 今年の五月に正式版がリリースされたばかりのサービスBigQueryとGoogleAppEngineを連携させてみるのが今回のテーマ。 まず、今年のGoogle I/Oで発表された「Building data pipelines at Google Scale」を紹介する。 このデモンストレーションはGoogleAppEngineのDataStoreのデータをCSVに変換し、GoogleCloudStorageにファイル出力する。そのデータをGoogleBigQueryの解析に使う。 という流れになっている。 【手順】 １．プロジェクト作成 ・まず必要な準備はGoogleBigQuery APIとGoogleCloudStorageを利用可能な状態にする必要がある。これはGoogle APIs Consoleから可能だ。 ・TeamよりAccoun
雲の上のクラスタ
NDB Transactions トランザクションとは一連のオペレーションのセットについて完全に成功かまたは完全に失敗のどちらかにする制御のことである。アプリケーションは複数の計算とオペレーションを一つのトランザクションで行う事が出来る。NDBのAsynchronous APIを使用すると、独立している処理であれば、複数のトランザクションを同時に管理する事が出来る。Synchronous APIは@ndb.transactional()デコレータを使用する事によって簡単にTransactionを制御できる。 競合が発生した場合は、失敗するが、NDBはその失敗したトランザクションを何回か自動的にリトライを行う。従って、その関数はリトライによって複数回呼び出される事がある。リトライの回数はデフォルトで3回である。もしそれでもトランザクションが失敗する場合は、NDBがTransactionFai
Google Cloud Platform
Not your computer? Use a private browsing window to sign in. Learn more about using Guest mode
Web便利ツール/URLエンコード・デコードフォーム - TAG index Webサイト
URLエンコードとデコードが行えるフォームです。 URLエンコード、またはデコードのフォームに文字列を入力し、変換用のボタンをクリックしてください。 エンコードする文字を細かく設定したい場合は「URL Encode Tool（試験運用中）」をご利用ください。
Google Cloud Platform
Not your computer? Use a private browsing window to sign in. Learn more about using Guest mode
App Engine ドキュメント | App Engine Documentation | Google Cloud
App Engine は、大規模なウェブ アプリケーションを開発およびホスティングするための、フルマネージド型のサーバーレス プラットフォームです。アプリの開発では複数の一般的な言語、ライブラリ、フレームワークからの選択が可能で、開発したアプリのインスタンスのサーバー プロビジョニングとスケーリングは App Engine によってオンデマンドで行われます。詳細については、こちらをご覧ください。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
