gpt4 book ai didi

hadoop - 使用不同的 hadoop-mapreduce-client-core.jar 运行 hadoop 集群

转载 作者:可可西里 更新时间:2023-11-01 16:17:45 26 4
gpt4 key购买 nike

我在安装了 CDH4.2.0 的 hadoop 集群上工作并遇到了 this错误。它已在更高版本的 hadoop 中得到修复,但我无权更新集群。有没有办法告诉 hadoop 在通过命令行参数运行我的工作时使用这个 jar

hadoop jar MyJob.jar -D hadoop.mapreduce.client=hadoop-mapreduce-client-core-2.0.0-cdh4.2.0.jar

新的 mapreduce-client-core.jar 文件是票证中的补丁 jar。或者必须用这个新的 jar 完全重新编译 hadoop?我是 hadoop 的新手,所以我不知道所有可能的命令行选项。

最佳答案

我不确定当您执行 hadoop 命令时,您实际上是在客户端 jar 中执行代码。

可以不用MR1吗?该问题表明此问题仅在您使用 MR2 时出现,因此除非您真的需要 Yarn,否则您最好使用 MR1 库来运行您的 map/reduce。

关于hadoop - 使用不同的 hadoop-mapreduce-client-core.jar 运行 hadoop 集群,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/16204222/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com