2023年4月24日のブックマーク (2件)

  • Google Compute Engineインスタンス環境下でbqコマンドを使ってBigQueryにデータを投入する | DevelopersIO

    アライアンス統括部 サービスグループの しんや です。 DevelopersIOのブログ投稿データを収集・加工・可視化して社内に共有することをここまで実践してきていたのですが、その際に用いている環境にはAmazon Redshiftを活用していました。先日個人的に部署異動(2023年03月01日付けでアライアンス統括部に異動)したのもあり、またデータ連携と可視化の仕組みもよりスムーズに/便利に/広範に連携出来るようにしたいと思い、「社内投稿データ分析環境をBigQueryに載せ替える手順をそれぞれブログにまとめておこう」と思い立ちました。 当エントリではその中から「Google Compute Engineインスタンス環境からbqコマンドを使ってデータをBigQueryに連携する」手順についてまとめておこうと思います。 目次 データ連携イメージ(構成図) Google Cloud:Comp

    Google Compute Engineインスタンス環境下でbqコマンドを使ってBigQueryにデータを投入する | DevelopersIO
    shinyaa31
    shinyaa31 2023/04/24
    書きました!
  • Google Apps Scriptを使ってSpreadsheetのデータをBigQueryに連携する | DevelopersIO

    アライアンス統括部 サービスグループの しんや です。 DevelopersIOのブログ投稿データを収集・加工・可視化して社内に共有することをここまで実践してきていたのですが、その際に用いている環境にはAmazon Redshiftを活用していました。先日個人的に部署異動(2023年03月01日付けでアライアンス統括部に異動)したのもあり、またデータ連携と可視化の仕組みもよりスムーズに/便利に/広範に連携出来るようにしたいと思い、「社内投稿データ分析環境をBigQueryに載せ替える手順をそれぞれブログにまとめておこう」と思い立ちました。 当エントリではその中から「Google Apps Scriptを使ってスプレッドシートのデータをBigQueryに連携する」手順についてまとめておこうと思います。 目次 データ連携イメージ(構成図) 作成・作業手順 実行スクリプト コードの実行 スケジュ

    Google Apps Scriptを使ってSpreadsheetのデータをBigQueryに連携する | DevelopersIO
    shinyaa31
    shinyaa31 2023/04/24
    書きました!