タグ

関連タグで絞り込む (1)

タグの絞り込みを解除

BigQueryに関するArahabicaのブックマーク (2)

  • エクスポートされたFirestoreドキュメントをBigQueryに自動ロード

    [2019年10月追記] Firebase Extensions の Export Collections to BigQueryが登場2019年9月に Firebase Extensions が登場し、そこに含まれるExport Collections to BigQuery が、がほぼ上位互換かつお手軽です。 記事のやり方のような一括エクスポート形式ではなく、Firestore のデータ変更がリアルタイムで蓄積されていきBigQueryのview機能で現時点の状態に対して分析できる作りになっています。まったく同じものではないため、細かい使い勝手やコスト面などで差異はあります。

    エクスポートされたFirestoreドキュメントをBigQueryに自動ロード
  • Google BigQueryで今期アニメに関するツイートを分析するぞい! - Qiita

    BigQueryでアニメに関するツイートを分析する アニメツイートを記録したCSVをBigQueryに上げる データ形式を選択する CSV/JSON/AppEngine Backupが選べますが今回はCSVとします。 File Uploadでブラウザからファイルアップロード・・・といきたい所ですがファイルブラウザからのアップロードは10Mバイトに制限されています。 10Mバイト以上のファイルはGoogleのクラウドストレージにファイルをアップロードする必要があります。 Google Cloud Storage にデータを上げる Cloud StorageにBucketsを作成しファイルをアップロードします。 こちらではブラウザから10M以上のファイルのもアップロードできますが、数百Gバイトなどのでかいファイルはブラウザがタイムアウトなどを起こすのでGoogleの用意するツール(gsutil

    Google BigQueryで今期アニメに関するツイートを分析するぞい! - Qiita
  • 1