Parquet 是一种列式文件格式,针对分析工作负载进行了优化。它存储带有类型信息的数据,支持高效的压缩,对于大型数据集的读取速度远快于 CSV。pd.read_parquet() 需要使用 pyarrow 或 fastparquet 库,并且是磁盘上存储处理后的 DataFrame 的首选格式。
pd.read_parquet()
pyarrow
fastparquet
用自己的话写下这一站的结论。