［Google App Engine編］大量データの処理はかかる時間に注意
Google App Engineで大量データを処理する場合、特別な配慮が必要になります。処理時間の制限など、独特の制約に引っ掛かる恐れがあるからです。 大量データを扱うケースとして、テーブルのスキーマ変更、検索結果のダウンロードなど、データの一括処理という三つについて、それぞれの設計ノウハウを解説します。 スキーマのバージョンをフィールドに持つ 一つ目の設計ノウハウは、テーブルのスキーマを変更する際に効果があるものです。 稼働中のシステムにおいて、機能を追加・変更する際、テーブルのスキーマ変更が必要になる場合があります。スキーマの変更に備えて、Google App Engineでは、RDBベースの場合とは違った設計が必要になります。「スキーマのバージョンをフィールドに持つ」というものです。 Datastoreはそもそも、同じテーブル内で、異なるスキーマのレコードが混在していてもかまわない
約半月で 4,000,000PV を華麗にさばく Google App Engine
「なんでも判定ツクール」へ多数のアクセスありがとうございますm(_ _)m 1月末にリリースした当初は僅かのアクセスだったのですが、Twitterで火が付いてからは一気にアクセスが集まり、気が付けば2月1日〜2月16日で4,000,000PVを超えました。 自分では絶対に考えつかないであろうユニークな判定がたくさんできて、私自身もとても楽しんでいます:-D（面白い発想をする人は世の中にたくさんいるものです） このサイトはGoogle App Engine(GAE）＋Pythonで構築しているのですが、このアクセス数ならではのGAE上で体験できたことをざざっと書いていきます。 無料？課金？ まずはじめに大事なこと。 「なんでも判定ツクール」ではGAEを課金状態にしています。無料のQuotaではとてもではないですが、このアクセスは捌けません:D GAE公式サイトには 月間約 500 万ページ
はてブホットエントリーを見るWebサービス「hot.hatebu」を作りました
はてブホットエントリーを集計して見るWebサービス「hot.hatebu」を作りました。 はてブのホットエントリーを集計して一覧で見るサービスです。機能をざっくり挙げると以下です。 「エントリ」「時間」「タグ」「ユーザ」の集計データを表示 日付範囲を指定して、合算した集計データを表示 パネル機能 詳細については説明ページがありますので、こちらをどうぞ。 hot.hatebu | 説明ページ ここでは作った経緯や使い方のポイントなどを。 週間はてブホットエントリーを見たい そもそものきっかけは週間ホットエントリーを見たいというものでした。イベントやネットラジオなどで話す時のネタにホットエントリーを使うのですが、公式サイトでは一日単位で見る方法しかありません。 例えば、先週のホットエントリーをまとめて見る場合は1ページづつページを辿るしかありません。 そこで複数日のホットエントリーを合算して見
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
SnowLeopardでGAE(Python 2.5)開発環境をつくるまでを走り書き - matuダイアリー
最近、Google App Engine(以下GAE)で開発*1をやっているのですが、SnowLeopardにプリインストールされているPythonのバージョンは2.6で、GAEでのアプリ開発にはPython 2.5が必要なので、Python 2.5をインストールしました。 以下、やったことのログです。(走り書きですみません) Xcodeのインストール Macの統合開発環境であるXcodeをインストールします。OSのインストールメディアから。 MacPortsのインストール MacでUNIXツールを手軽に利用できるようになるパッケージ管理システムであるMacPortsをインストールします。こちらから最新版をインストール。 Python 2.5をインストール Python 2.5をインストールします。同時に使用するPythonのバージョンを手軽に切り替えてくれるツールであるpython_se
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
グーグル、Google App Engineを1日で学べる日本語教材を公開
