Amazon Athenaでパーティション数が多いJSONのテーブルをParquet形式のテーブルに変換できずにハマった on @Qiita

kai_kou のブックマーク 2019/12/27 09:10

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/4679223843203279266/comment/kai_kou" data-user-id="kai_kou" data-entry-url="https://b.hatena.ne.jp/entry/s/qiita.com/kai_kou/items/cd78d4d17d0b2b8cbc2f" data-original-href="https://qiita.com/kai_kou/items/cd78d4d17d0b2b8cbc2f" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fqiita.com%2Fkai_kou%2Fitems%2Fcd78d4d17d0b2b8cbc2f" data-user-icon="/users/kai_kou/profile.png">Amazon Athenaでパーティション数が多いJSONのテーブルをParquet形式のテーブルに変換できずにハマった - Qiita</a><br><p style="clear: left">Amazon Athenaでパーティション数が多いJSONのテーブルをParquet形式のテーブルに変換できずにハマった on <a href="https://twitter.com/Qiita" target="_blank" rel="noopener nofollow">@Qiita</a></p><a class="datetime" href="https://b.hatena.ne.jp/kai_kou/20191227#bookmark-4679223843203279266"><span class="datetime-body">2019/12/27 09:10</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！

Amazon Athenaでパーティション数が多いJSONのテーブルをParquet形式のテーブルに変換できずにハマった - Qiita

qiita.com/kai_kou2019/12/27

Amazon Athenaを利用してS3バケットにあるJSONファイルをParquet形式に変換するときにHIVE_TOO_MANY_OPEN_PARTITIONS というエラーが発生したので原因調査して対策を考えてみました。 Parquet形式とはなんぞ？と...

3 人がブックマーク・1 件のコメント

他のコメントを読む

＼コメントがサクサク読めるアプリです／

はてなブックマーク

Amazon Athenaでパーティション数が多いJSONのテーブルをParquet形式のテーブルに変換できずにハマった - Qiita

はてなブックマーク

公式Twitter

はてなのサービス