Snowflakeのデータウェアハウスの仕組み
『Building an elastic query engine on disaggregated storage』（Vuppalapati et al. 2020）は、クラウドベースのデータウェアハウス「Snowflake」の背後にある設計上の決定事項について説明している。この論文では、Snowflakeの設計と実装を、クラウドインフラストラクチャの最近の変化（新しいハードウェア、きめ細かな課金など）が、Snowflakeシステムの設計と最適化を導いた多くの前提条件をどのように変更したかについての議論とともに紹介している。本稿は、コンピュータサイエンスのカンファレンス「Networked Systems Design and Implementation（NSDI）2020」に採択された上述論文のまとめである。 Abstract最先端のデータベースに近いSQL対応のクラウド型データウェ
Snowflakeで何ができる？ 基礎情報解説
過去2回の記事でSnowflakeとは何か、何ができるかを見てきました。今回はSnowflakeの特長を裏付ける実装とクラウドネイティブな設計思想を見ていきます。
[レポート] Data Vault Modelling on Snowflake #SnowflakeDB | DevelopersIO
大阪オフィスの玉井です。 Snowflake社の下記のウェビナーを受講したので、レポートします。 ウェビナー情報 公式情報 概要 From insurance and banking to utilities, gaming to travel, Data Vault is gaining popularity across all industries as a methodology that claims to be the most agile and future-proof for connecting all of your data. Whether you work with complex data models or a plethora of data sources, achieving the potential of your data despite mak
![[レポート] Data Vault Modelling on Snowflake #SnowflakeDB | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/049e0cb3fd75c4238c328b0ab80dbacbbad7becb/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2019%2F09%2Fsnowflake-logo-1200x630.png){kind=logo}
データ統合基盤 CS アナリティクスで Snowflake へのSQLクエリ実行時にUSEコマンドを利用してみた | DevelopersIO
こんにちは！DA(データアナリティクス)事業本部 インテグレーション部の大高です。 以前にこちらのエントリで、弊社プロダクトのカスタマーストーリー アナリティクス(Customer Story Analytics:CSA)で「SQLクエリをSnowflakeに対して実行する機能」についてご紹介しました。 こちらのエントリでは単純な「SELECT-INSERT」のSQLについてご紹介しましたが、実際のSQL実行では特定の「ロール」、「ウェアハウス」、「データベース」、「スキーマ」を指定してクエリを実行したい場合があるかと思います。 今回はそんな時に利用できる「USE」コマンドを利用したSQLクエリの実行を、実際に試してみました。 「CSA」の概要についてはこちらの記事をご参照ください。 また、「CSA JMC」バージョン5.0の概要については、こちらの記事で紹介しています。 CSA JMCの
Snowflakeの認定資格「SnowPro Core」に合格するまでの道のり | DevelopersIO
こんにちは！DA(データアナリティクス)事業本部 インテグレーション部の大高です。 本日Snowflakeの認定資格「SnowPro Core」に無事合格することができました！せっかくなので合格するまでの道のりを書きたいと思います。 SnowPro Coreとは？ 「SnowPro Core」はSnowflake社による認定資格のうち、一番ベーシックとなる認定資格です。上位資格に「SnowPro Advanced」がありますが、こちらは2020/02/17現在、まだ準備中のようです。 SnowPro Certifications 試験は100問の選択式（単一選択 or 複数選択）となっており、Webassessorによるオンライン試験となります。言語は英語となり、試験時間と合格ラインは２時間で80%以上となります。 一方で、日本向けの特別条件として2020/02/17現在では２時間半で70
AppFlow+Snowflake+Tableauで可視化する！クラメソ面白Slackチャンネル決定戦 | DevelopersIO
S3上のデータをテーブルにロードする 上記で設定したステージのデータをテーブルにロードします。file_formatには(type=json)を、from句には@ステージ名を指定します。 copy into json_notify_kusa from @cm_niino_s3 file_format = (type=json); select文を発行するとJSON形式でデータが格納されていることが確認できます。 JSONを可視化用に構造化する この一連の検証で一番感動したポイントです。無事にデータをロードできたものの、JSON形式のままではTableauでの可視化ができません。データ加工ツールに接続したり整形のためのプログラムを書いたりしなくても、クエリを書くだけでJSON形式のデータを集計に必要な項目のみ抜き出して簡単に構造化することができるんです。そう、Snowflakeならね。 一例
Cloud Data Warehouse Benchmark | Blog | Fivetran
Our newest benchmark compares price, performance and differentiated features for Redshift, Snowflake, BigQuery, Databricks and Synapse. Over the last two years, the major cloud data warehouses continue to make incremental improvements that give customers faster performance and lower cost. Contrary to popular belief, these vendors] make ongoing efficiency improvements that save customers money desp
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Aggregate Functions | Snowflake Documentation
Snowflake SnowPro Certification Exam Cheat Sheet
Redirecting to …
Snowflake Advent Calendar 2019 の記事一覧 | DevelopersIO