Selectorsで特定のモデルをdbt runの対象外にしてみた | DevelopersIO
はじめに データアナリティクス事業本部のおざわです。 オプションを指定せずにdbt runを実行すると、プロジェクト内の有効なモデルがマテリアライズ（実体化）されます。なにも指定せずにdbt runした場合に、特定のモデルを除外できないか試してみたところ、Selectorsを使えば目的の動作ができましたので共有したいと思います。 今回使ったdbtのバージョンです。 ❯ dbt --version Core: - installed: 1.7.7 - latest: 1.7.7 - Up to date! Plugins: - redshift: 1.7.3 - Up to date! Selectorsとは 今回使うSelectorsは、一言でいうとリソースの選択方法に名前を付けておく機能です。 使い方としては、selectors.ymlにリソースの選択方法を定義しておきます。あとはコマン
AWS Certified Data Analytics – Specialty (DAS)が2024 年4月9日に廃止されるので情報をまとめてみた | DevelopersIO
AWS Certified Data Analytics – Specialty (DAS)が2024 年4月9日に廃止されるので情報をまとめてみた はじめに こんにちは！AWS事業本部コンサルティング部の和田響です。 先日AWS Certified Data Analytics – Specialty (以下DAS)試験に合格ましたが、その翌日にDAS試験が今後廃止されることを知りました。 AWS Certified Data Analytics - Specialty試験が2024.04.08に廃止されるみたい。 pic.twitter.com/nEX87wSXYS — わださん@2024年3月までにAWS12冠 (@wadasan202309) November 1, 2023 この記事ではDAS認定廃止に伴い、私が調べてわかった各種情報を共有します。 なぜ廃止になるのか？ DAS認
Amazon Redshift + dbt ユーザー必読の書「Best Practices for Leveraging Amazon Redshift and dbt」を読んでみた | DevelopersIO
Amazon Redshift + dbt ユーザー必読の書「Best Practices for Leveraging Amazon Redshift and dbt」を読んでみた データアナリティクス事業本部のコンサルティングチームの石川です。今日は、AWSが執筆した Amazon Redshiftとdbtを活用するためのベストプラクティスをまとめたホワイトペーパーを紹介します。 Best Practices for Leveraging Amazon Redshift and dbt™ リンクから誰でもダウンロードできます。 Redshift + dbtを導入しているけれど、果たしてこれが正しい使い方なのかモヤモヤしている方は少なくないと想像してます。筆者もその一人ですが、そのような方々の道標になれば幸いです。 目次 Abstract Introduction Amazon Reds
データ変換処理をモダンな手法で開発できる「dbt」を使ってみた | DevelopersIO
奈良県でリモートワーク中の玉井です。 日本では全くと言っていいほど知名度がありませんが、国外（アメリカ？）のデータ分析界隈では既にメジャーな存在になりつつある「dbt」（data build tool）について、ご紹介します。 dbtとは？ 公式情報など 公式はこちら（ググラビリティが低い名前なので検索しづらい）。 （死ぬほどざっくりいうと）データ変換を効率よく実施できるツールです。SaaSとしての提供になっているので（最初からあったわけではなく、後から登場したようです）、Webブラウザさえあれば、すぐに利用することができます。 主な特徴 ELTの「T」を担当するツール データの前処理における作業をELT（Extract、Load、Transform）と呼称することがありますが、それの「T（変換）」を担当します。E（抽出）やL（ロード）はやりません。 そして、その変換処理をどうやって設定す
Zendeskのデータの分析環境を準備する方法まとめ | DevelopersIO
大阪オフィスの玉井です。 提供している製品やサービスを顧客に長く使ってもらおうとする時、それらのサポート（カスタマーサポート等）は非常に重要です。これまでサポートというのはコストセンターとして扱う企業がほとんどでしたが、近年カスタマーサクセス等の思想が出てくるようになって、それに伴ってサポートをプロフィットセンターとして扱う企業も出てきました。製品やサービスで利益を上げるにあたり、サポートという業務はそれだけ重要になってきているということです。 顧客に製品やサービスを継続利用してもらえるようなサポートを提供するためには、サポートに関するデータを徹底的に分析することが必須です。 今回はサポート業務でよく使われているZendeskのデータを分析する際、Zendeskのデータを扱えるようにする方法をいくつかご紹介します。 参考までに、下記エントリは、Zendeskのデータで着目するべき指標をまと
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
20分で大体わかる！ AWS Glue Data Qualityによる データ品質検査
Glue DataBrewでデータをクリーニング、加工してみよう #devio2021
