はじめに こんにちは。 前回 【Google Cloud】Bigqueryに組み込まれたDataformとはどのようなサービスなのか? という記事を書かせて頂きましたが実際にDataformを軽く試してみました。 Dataformを試してみる パターン① パターン①としては下記内容を試してみました。 test_sales : GCSのファイルをテーブルへロードする test_id_mst : マスタテーブルを登録する test_dm : 項番1、2を結合してデータマート(テーブル)を更新する。更新はCTAS文を実行する。 test_dm_snapshot : 項番3のテーブルを利用してスナップショットマートを更新する。更新はDelete&Insert文を実行する。 最終的には以下のDAGが作成されます。 1. test_sales : GCSのファイルをテーブルへロードする GCSのファイ
![【Google Cloud】BigqueryのDataformを試してみた - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/3362a3cd966d2e67b28bbb7e2c6f369afcd21471/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-9f5428127621718a910c8b63951390ad.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTkxNiZoPTMzNiZ0eHQ9JUUzJTgwJTkwR29vZ2xlJTIwQ2xvdWQlRTMlODAlOTFCaWdxdWVyeSVFMyU4MSVBRURhdGFmb3JtJUUzJTgyJTkyJUU4JUE5JUE2JUUzJTgxJTk3JUUzJTgxJUE2JUUzJTgxJUJGJUUzJTgxJTlGJnR4dC1jb2xvcj0lMjMyMTIxMjEmdHh0LWZvbnQ9SGlyYWdpbm8lMjBTYW5zJTIwVzYmdHh0LXNpemU9NTYmdHh0LWNsaXA9ZWxsaXBzaXMmdHh0LWFsaWduPWxlZnQlMkN0b3Amcz04NzVhODQ1OWEwZTlmZWI5YWFmOTIzNGY2ZjIxYWM4NQ%26mark-x%3D142%26mark-y%3D112%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTcxNiZ0eHQ9JTQwc2lja2JveSZ0eHQtY29sb3I9JTIzMjEyMTIxJnR4dC1mb250PUhpcmFnaW5vJTIwU2FucyUyMFc2JnR4dC1zaXplPTMyJnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnM9ZWFlMmJhMDUwOGE1MzI0MWZmZjQ3MjE5YzJmNzE3ZTU%26blend-x%3D142%26blend-y%3D491%26blend-mode%3Dnormal%26s%3D245b50ecea0c2bfc4c4bb82172f77a2a)