ストリーミングデータをSQLでリアルタイムに分析できる「Materialize」を使ってみた | DevelopersIO

大阪オフィスの玉井です。 データ分析にリアルタイムを求めている方は必見のツールを紹介します。 Materializeとは？ 公式曰く「streaming SQL materialized view engine」です。 … …わからん。 ざっくり説明 ストリーミングデータに対してリアルタイムにクエリできるDB（みたいなもの）です。 普通のDBやDWHの場合、テーブルなど（実体はストレージとかだと思いますが）にデータが格納されており、そこに対してクエリ（照会）します。Materializeも表面上はSQLなので、ビュー等の概念がありますが、実際のデータ自体は、静的なデータではなく、Kafka等のストリーミングデータ（常に増え続けているデータ）を対象にします。 つまり、増え続けるストリーミングデータに対して、あたかも普通のDBのようにクエリすることができます。しかも、結果は常にリアルタイムです

[sh19910711]

"ストリーミングデータに対してリアルタイムにクエリできる / SELECT句が少々特殊ですが、これは半構造化データを構造化に整形するための、Materialize用の書き方です。Snowflakeの半構造化データ用のクエリと近い感じ"

[tmatsuu]

Norikraのようなものかな