Apache Iceberg 1.5 アップデートまとめ - 流沙河鎮

2024/3/11、Iceberg 1.5がリリースされた。 https://iceberg.apache.org/releases/ 本記事ではIceberg 1.5のアップデート内容を紹介する。 記事内容はリリースノートと、各アップデートのPR、コードを基に作成した。 Specの仕様変更 テーブルメタデータにパーティション統計情報を追加し、統計情報ファイルの仕様を定義 概要 関連PR パーティション統計情報のトラッキング機能を追加 概要 関連PR ナノ秒精度のタイムスタンプ型を追加 概要 関連PR パーティショニングとソートにおいて複数カラムを組み合わせたトランスフォームをサポート 概要 関連PR カタログ機能の拡張 viewサポート 概要 関連PR テーブルごとの認証セッションのキャッシュを追加 概要 関連PR カタログ実装指定方式の追加(glue,jdbc,nessie) 概要 関