Parquet, CSV, Pandas DataFrameをPyArrow経由で相互変換する - Qiita

# CSV -> DataFrame df = pd.read_csv('/path/to/file.csv') # DataFrame -> Arrow Table table = pa.Table.from_pandas(df) # Arrow Table -> Parquet pq.write_table(table, '/path/to/file.pq')