gpt4 book ai didi

hadoop - 如何将数据从 Cassandra 导入到 Hadoop 文件系统

转载 作者:可可西里 更新时间:2023-11-01 15:41:00 26 4
gpt4 key购买 nike

我想知道如何将数据从 Cassandra 导入 Hadoop 文件系统,以及如何定期持续进行(即当 Cassandra 数据库发生变化或新数据插入 Cassandra 时如何我们可以检测到变化并将数据迁移到 HDFS(Hadoop 文件系统)吗?

最佳答案

您有多种选择可以做到这一点。您可以编写顺序程序或 ma​​preduce 作业或 pig 等来实现自动化,您也有多种选择。你可以有一个 cron 来为你做这件事,或者如果你想让你的工作流程更复杂,你可以使用 Oozie(一个工作流引擎)来根据你想要的任何标准安排你的工作。

关于hadoop - 如何将数据从 Cassandra 导入到 Hadoop 文件系统,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/14061623/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com