gpt4 book ai didi

python - 使用 PyArrow 读取 CSV

转载 作者:行者123 更新时间:2023-11-28 21:35:17 31 4
gpt4 key购买 nike

我有大型 CSV 文件,我最终希望将其转换为 Parquet 。由于内存限制及其处理 NULL 值(这在我的数据中很常见)的困难,Pandas 无济于事。我检查了 PyArrow 文档,并且有用于读取 Parquet 文件的工具,但我没有看到有关读取 CSV 的任何内容。我错过了什么,还是这个功能与 PyArrow 不兼容?

最佳答案

我们正在研究此功能,现在有一个拉取请求:https://github.com/apache/arrow/pull/2576 .您可以通过测试来提供帮助!

关于python - 使用 PyArrow 读取 CSV,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/52413318/

31 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com