Spring Hadoop |作业未出现在作业跟踪器 GUI 上

Question

我正在为我的应用程序使用 Spring for Apache Hadoop 1.0.0.M2。该应用程序使用 maven 程序集插件打包为二进制分发版，并使用以下命令在集群上运行:java -jar mlprocessor.jar

jar 中的 list 文件包括对加载 spring 上下文文件的 Main 类的引用。工作执行得很好，我也看到了结果。但是，作业跟踪器 GUI 上没有此作业的踪迹。

虽然日志显示以下警告:

WARN [org.apache.hadoop.util.NativeCodeLoader] - Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

我想检查是否有人知道这个问题，或者我遗漏了什么。

Answer 1

我确实在 Spring Hadoop 论坛 (http://forum.springsource.org/showthread.php?131245-Job-not-appearing-on-JobTracker-user-interface) 上发布了同样的问题并在那里收到了答案:

我在 hdp:configuration 中缺少“mapred.job.tracker”属性配置。将配置更改为以下后，Job tracker UI 能够跟踪此作业。

<hdp:configuration>
    fs.default.name=${fs.default.name}
    mapred.job.tracker=${mapred.job.tracker}
</hdp:configuration>