gpt4 book ai didi

feather - 如何压缩和解压缩 Arrow 或 Feather 文件?

转载 作者:行者123 更新时间:2023-12-05 03:58:48 36 4
gpt4 key购买 nike

我计划将数据文件格式从 parquet 更改为 feather。 Parquet 有压缩选项(lz4 等),我已经使用过它们。但我无法在 Feather 或箭头文件中找到它们。不支持压缩吗?

最佳答案

专为内存驻留数据设计的 Arrow 文件格式不支持压缩算法,例如 lz4、snappy、gzip 和 zlib。 Arrow 目前支持的唯一压缩是字典压缩,这种方案通常不需要在数据处理之前解压缩。

关于feather - 如何压缩和解压缩 Arrow 或 Feather 文件?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/57685320/

36 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com