gpt4 book ai didi

hadoop - Hector 的批处理 Mutation 与使用 Hadoop 作业将数据加载到 Cassandra 中?

转载 作者:可可西里 更新时间:2023-11-01 14:50:46 24 4
gpt4 key购买 nike

有人可以强调 Hector 的批处理变异和使用 Hadoop 作业将数据加载到 Cassandra 的优缺点吗?

我知道在 Hector 中您可以执行以下操作:

mutator.addInsertion(...);
mutator.execute();

在 Hadoop 中,您可以使用 MR 作业将数据加载到 Cassandra。

我正在寻找使用或不使用它们的原因。谢谢!

最佳答案

如果数据源当前不在 hadoop(或 hbase)中,我建议只使用如上所述的 Mutator 的多线程加载器来减少移动部件的数量。

这个要点是过时的,但方法是相似的: https://gist.github.com/397574

如果您需要更多详细信息,请告诉我。

关于hadoop - Hector 的批处理 Mutation 与使用 Hadoop 作业将数据加载到 Cassandra 中?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/7079554/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com