経緯 datastoreからexporterでRDBにデータ移行。 その際にdatastoreの該当のkindから移行先のDBのテーブルに同じレコード数が移行できているか確認したい。 問題 GAE datastoreを参照するdatastoreViewではselect count(*) ...が出来ない 対応方法 datastoreViewで表示されるデータをスクレイピングしてカウント 面倒だったこと 現状のdatastoreViewはデータを非同期で読み込んでいるのでスクレイピングが困難 古いdatastoreViewでパラーメータにlimitとoffsetを渡しながらページ遷移してカウントしていった。 しかもlimitは200が上限... 旧datastoreView スクレイピングのサンプル googleのログインはEメール入力してから遷移してパスワード入力の２段階になる。 Mech