BigQuery×Go開発の裏側：エミュレータ活用からAPI開発まで

SocialDog Analyticsチームエンジニアのuutaです。 SocialDog Analyticsチームでは主にSocialDogの分析機能の開発を行っています。 前提・問題意識 SocialDogの投稿パフォーマンス機能開発において、大量のデータを効率的に処理する必要性から、BigQueryの採用を検討しました。その過程で、既存のバッチ処理やAPIで使用しているGo言語とBigQueryを連携させる環境の構築に取り組むことになりました。 しかし、Go言語でBigQueryを扱う環境の構築に関する情報が非常に限られていたため、多くの課題に直面しました。この記事では、私たちが経験した問題と、その解決策を共有します。 この記事で紹介すること Go言語で利用できるBigQueryのパッケージについて bigquery-emulatorを導入するための簡単な説明 ローカル開発のトラブル