gpt4 book ai didi

java - JAVA代码触发Hadoop命令

转载 作者:可可西里 更新时间:2023-11-01 15:41:35 26 4
gpt4 key购买 nike

如何从一个简单的 jar 触发一个在 Hadoop 上工作的 jar,以便它使用 HDFS,实际上,我正在手动运行这个命令 bin/hadoop jar ~/wordcount_classes/word.jar org.myorg.WordCount ~/hadoop-0.20.203.0/input1 ~/hadoop-0.20.203/output2 我在 HDFS 中提供了输入和输出目录,我在这里使用 word.jar,我想让它自动从 Java 项目中触发。

最佳答案

据我所知,您要求的所有内容都是由您的 jar 的 Main 完成的。它读取参数、创建作业配置、设置输入和输出格式并最终运行作业。

关于java - JAVA代码触发Hadoop命令,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/9306302/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com