“ParquetやORCでは、分散処理を行うことを前提として、Encoding/Compressionの単位、IOの単位、MapReduceの単位で処理しやすいようにデータが分割配置が工夫されています。以下の図はParquetのファイルフォーマットの説明図”

yarumato のブックマーク 2019/04/26 12:57

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/4653172990760523809/comment/yarumato" data-user-id="yarumato" data-entry-url="https://b.hatena.ne.jp/entry/s/engineer.retty.me/entry/columnar-storage-format" data-original-href="https://engineer.retty.me/entry/columnar-storage-format" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fengineer.retty.me%2Fentry%2Fcolumnar-storage-format" data-user-icon="/users/yarumato/profile.png">カラムナフォーマットのきほん 〜データウェアハウスを支える技術〜 - Retty Tech Blog</a><br><p style="clear: left">“ParquetやORCでは、分散処理を行うことを前提として、Encoding/Compressionの単位、IOの単位、MapReduceの単位で処理しやすいようにデータが分割配置が工夫されています。 以下の図はParquetのファイルフォーマットの説明図”</p><a class="datetime" href="https://b.hatena.ne.jp/yarumato/20190426#bookmark-4653172990760523809"><span class="datetime-body">2019/04/26 12:57</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！