気に入った記事をブックマーク
- 気に入った記事を保存できます
保存した記事の一覧は、はてなブックマークで確認・編集ができます
- 記事を読んだ感想やメモを書き残せます
- 非公開でブックマークすることもできます
エントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
1user
がブックマーク
0
0
dbtでメタデータ管理を完結させる！dbt sourceのメタデータをSTRUCT型カラムやポリシータグも含めBigQueryに連携する方法 - ミツモア Tech blog
1 user
engineering.meetsmore.com
engineering.meetsmore.com
記事へのコメント0件
- 注目コメント
- 新着コメント
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
いまの話題をアプリでチェック！
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
dbtでメタデータ管理を完結させる！dbt sourceのメタデータをSTRUCT型カラムやポリシータグも含めBigQueryに連携する方法 - ミツモア Tech blog
ミツモア データグループの酒井です。データ分析基盤の構築や運用を担当しています。 今回はdbt source... ミツモア データグループの酒井です。データ分析基盤の構築や運用を担当しています。 今回はdbt sourceのメタデータをBigQueryに連携させる方法をご紹介します。 メタデータは重要です。 データ量が増え続ける中、メタデータが適切に管理されていないと、各テーブルやカラムの意味を把握するのが困難になり、データ活用の効率が大きく低下します。 特にミツモアではAIツールであるtext2SQLを内製しており、この精度を上げる為にもメタデータの効率的な管理が必要になります。 ミツモアのデータ分析基盤ではBigQueryをデータウェアハウスとして、データ変換ツールにdbt coreを使用しています。 dbt modelのスキーマ定義ファイルのメタデータは自動でBigQuery(INFORMATION_SCHEMA)に連携されますが、dbt sourceのメタデータは残念ながら連携されません。 こ
engineering.meetsmore.com
engineering.meetsmore.com
engineering.meetsmore.com
engineering.meetsmore.com
www.bbc.com
www.cnn.co.jp
anond.hatelabo.jp
togetter.com
togetter.com
pc.watch.impress.co.jp
www.techno-edge.net
anond.hatelabo.jp
posfie.com
automaton-media.com
pc.watch.impress.co.jp
www.pearltrees.com
cookpad.com
note.com/01_0l
suumo.jp
levtech.jp
levtech.jp
levtech.jp
