LookerのExplore毎のクエリコスト出してみた - Qiita

こんにちは、 株式会社スマートドライブでモビリティデータに関わるコンサルティング をしている@zwt1nです。(主な仕事内容はこちら) 僭越ながら、Looker Advent Calendar 2020 の9日目を担当させて頂きます。 本記事ではLookerのExploreやPDT生成に掛かるクエリコストを把握する方法を紹介します。 想定読者 Lookerを導入している DWHにBigQueryを採用している BigQueryの監査ログだけでは限界を感じている コストという観点でExploreの最適化したいと少しでも思っている なぜ、こんなことをするのか？ シンプルにコスト削減したい、というのが本音です。 弊社データはGPSの地点情報をはじめ、多様に大量なデータをDWHに蓄積しております。 スキャン量が３００GBを超えるようなクエリを投げるのは日常茶飯事です。 また、弊社ではLookerで

[sh19910711]

"月に一度LookMLのリファクタリングDayを設けており、今回お見せしたようなExplore毎の料金も見ながら集約・効率化の対象を選定しています"