gpt4 book ai didi

csv - 将数据加载到 Cassandra 列族的最快方法是什么

转载 作者:行者123 更新时间:2023-12-01 09:20:46 25 4
gpt4 key购买 nike

我创建了一个 Cassandra 列族,我需要为此列族从 CSV 文件加载数据。 csv 文件有一个 15 Gb 的卷。

我正在使用 CQL 'COPY FROM' 命令,但这需要很长时间才能加载数据。
从 csv 文件将大量数据加载到 Cassandra 的最佳/最简单的方法是什么?

最佳答案

CQLSH 内置复制到/从 CSV 文件非常简单,适用于中小型数据集。您没有提到您使用的是哪个 Cassandra 版本,但在 2.1.5 ( CASSANDRA-8225 ) 中有很多性能改进。

对较大数据产生良好结果的替代工具是 cassandra-loader .您可以尝试使用文件的子集(如 1000 行)来确认它是否有效,然后尝试使用整个文件来查看性能。

关于csv - 将数据加载到 Cassandra 列族的最快方法是什么,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/33396749/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com