gpt4 book ai didi

Hadoop Mapper 没有运行我的类(class)

转载 作者:行者123 更新时间:2023-12-02 21:57:53 25 4
gpt4 key购买 nike

使用 Hadoop 版本 0.20.. 我正在创建一个作业链 job1 和 job2(其映射器在 x.jar 中,没有 reducer ),具有依赖关系并使用 JobControl 提交到 hadoop 集群。注意我有 setJarByClass 和 getJar 提供正确的 jar 文件,在提交前检查时。

提交通过,用户日志和 jobtracker 中似乎没有错误。但我没有看到我的 Mapper 被执行(没有 sysouts 或日志输出),但默认输出似乎来到了输出文件夹(输入文件按原样读取并输出)。我可以使用 x.jar 直接运行该作业,但我真的不知道为什么它不使用 Jobcontrol 运行。

请帮忙 !

最佳答案

这个问题困扰了我好几天。最后我发现是UsedGenericOptionsParser这造成了这个问题。将此设置为 true一切开始正常。

关于Hadoop Mapper 没有运行我的类(class),我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/9158911/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com