【備忘録】ライブラリの依存関係でエラーが出た時の対処方 - Qiita

はじめに Amazon EMR 6.15.0 上で Spark ジョブを実行中、S3 Tables Catalog（Iceberg）を使って S3 上のテーブルデータを処理したところ、以下のような Avro 関連エラーが発生しました： 自分は今まで依存関係や環境周りのエラーについては先輩に任せっきりだったため、 自分でもできるようにならねばと思い、今回悪戦苦闘しました。 次回も同じところで躓かないよう備忘録です！ 前提 今回追加したいのは、S3 Tables Catalog（Iceberg）を使用するのに必要なライブラリ s3-tables-catalog-for-iceberg そのため、関連するライブラリのバージョンは以下にする必要がありました。 今回の手順はここにたどり着くまでの過程を記載してます。 iceberg-core 1.6.1 →実際には、 iceberg-spark-ru