hadoop - 如何自定义作业名称？

Question

提交作业时，它会在 Hadoop 中获得一个 ID，例如 job_200904211745_0018。

但出于某种原因，我想提交 ID 为“job1”的文件。我该怎么做？

阿伦

Answer 1

来自 http://hadoop.apache.org/common/docs/r0.20.2/api/org/apache/hadoop/mapreduce/JobID.html 处的文档它说

Applications should never construct ... JobID strings, but rather use appropriate constructors or forName(String) method.

forName 函数究竟是如何运行的，不确定；我自己没用过。

如果你想为特定的工作构造一个'名称'，有JobName，可以通过工作的setJobName来设置。 .这是我在查看 M/R 管理页面时用来识别作业的内容。

你的实际原因，而不是“出于某种原因”，可能会帮助蜂群思维提出其他选择，或者也许有人面临同样的推理并有一个他们可以分享的解决方案。

您分享的关于您遇到的问题的背景和信息越多，往往可以提供更详细的响应和更适用的解决方案。