Parquetは便利なファイル形式で、列志向のフォーマットとしてはデファクトの1つと言っても過言ではないでしょう。 ですが、jsonやcsvとは違い、ファイルを見ただけでどんな構造かわかるものではありません。 この記事は、Parquetの具体的な構造について記述します。 はじめに この投稿は、Parquetの構造について、バイナリを見ながら確認するものです。 ただし、Parquetの大枠に注目した投稿なので、delta encodingやrun-lengthなど、個別の圧縮方法については取り扱いません。 ※ Parquetの作成には https://github.com/parquet-go/parquet-go を使用していますが、goの知識は必要ありません tldr Parquetは以下の構造を持っています。 ファイルはRowGroupとメタデータに分かれている RowGroupの中に
BEV（バッテリー電気自動車）は排ガスを出さない。CO2削減には最適。そう言われてきた。しかし、世界で電気が足りない。家庭やオフィス、工場で使う電力にBEV分が上乗せになると電力需要に合わせてレスポンスのいい火力発電を動員することになる。BEVはICV（内燃機関搭載車）よりも割高だが、補助金が十分だと売れる。しかし、ドイツのように補助金を止めると、とたんに売れなくなる。しかしOEM（自動車メーカー）は「莫大な開発費をかけたのだから売りたい」と、メディアや調査会社を動員して売り混んでいる。何のためにBEVを普及させようとしたのか、その意義はだれも問わなくなった。 TEXT：牧野茂雄（MAKINO Shigeo） 石油等価係数が改定されると何が起こるか？ 今年３月、米国エネルギー省（DOE）がBEVの電費（電力消費）をICVの燃費（燃料消費）に換算するための石油等価係数（PEF＝ペトローリアム
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Parquetフォーマット概観 - 発明のための再発明
もう何のためのEV普及なのかわからなくなった。売れなくても「普及ゴリ押し」の裏にあるもの