23.BigQueryの新機能 (2013/03/15)

BigQuery gets big new features to make data analysis even easier - Google Developers Blog 待望の新機能「Big JOIN」を始め、BigQueryに新しい機能が追加されました。 Big JOINについて試したのと、他の機能も少し読んでみたのでブログに書いてみます。 ◯Big JOINとは Big QueryではこれまでもテーブルのJOINをすることはできたのですが、 JOINするテーブルのサイズに制限がありました。 (クエリのメインのテーブルのサイズには元々制限は無いので、JOIN相手のテーブルに制限があるという感じ) データ集計においてJOINを必要とする頻度は高く、 これまではBigQueryを使う際にこの制限を回避するための対応が必要でした。 具体的には、 1.JOIN対象のテーブルをサブクエリ

[bigchu]

3億件と16万件のJOINが14秒 / 自分でも考察してみたい。