gpt4 book ai didi

hadoop - Apache Sqoop 和 Hive 之间的差异。我们可以一起使用吗?

转载 作者:可可西里 更新时间:2023-11-01 14:43:53 25 4
gpt4 key购买 nike

Apache Sqoop 和 Hive 有什么区别?我知道 sqoop 用于将数据从 RDBMS 导入/导出到 HDFS,而 Hive 是 Hadoop 之上的 SQL 层抽象。是否可以使用Sqoop将数据导入HDFS,然后使用Hive进行查询?

最佳答案

是的,你可以。事实上,许多人使用 sqoop 和 hive 正是为了您所说的。

在我的项目中,我必须做的是从我的 RDBMS(即 oracle)加载历史数据,然后将其移动到 HDFS。我为此路径定义了配置单元外部表。这让我可以运行配置单元查询来进行转换。此外,我们过去常常在这些数据之上编写 mapreduce 程序以进行各种分析。

关于hadoop - Apache Sqoop 和 Hive 之间的差异。我们可以一起使用吗?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/26346021/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com