エントリーの編集

エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
dbt-snowflake のテストフレームワークを作った話 - estie inside blog
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
dbt-snowflake のテストフレームワークを作った話 - estie inside blog
はじめに この記事は、dbt Advent Calendar 2023 22日目の記事です。 こんにちは、不動産テック企業であ... はじめに この記事は、dbt Advent Calendar 2023 22日目の記事です。 こんにちは、不動産テック企業である株式会社 estie でソフトウェアエンジニアをしている Ryosuke839 です。estie ではデータパイプラインを作る仕事をしているのですが、最近はデータパイプラインの MySQL + Python + sqlalchemy から Snowflake + dbt-core への移行を行っています。 さて、Python で書かれたデータパイプラインを dbt へ移行するに当たって、ひとつつまづきポイントがありました。 dbt でのテスト それは、データ加工のテストをどう書くかという問題です。estie のデータパイプラインでは中間層でデータの正規化、匿名化、名寄せなど様々な加工を行っているのですが、dbt で複雑なデータ加工を行ってしまうユースケースはメジャ