hadoop - 如何从 Oozie 调用驱动类

Question

是否可以从 oozie 工作流调用驱动程序类。我看到的例子是指定 mapper 和 reducer。我想调用驱动程序类，因为一些参数是从我的驱动程序类中设置的，需要传递这些参数。

如果提供任何文档链接或指南，将会很有帮助。

谢谢干杯:)

Answer 1

要使用 oozie 运行任何 MapReduce 作业，建议使用 <map-reduce>行动。在 Oozie 中作为一个 Action 紧密集成而不只是另一个 Java 程序有明显的优势。

1. 因为 Oozie 知道 <map-reduce> action 运行一个 Hadoop 作业，它提供了对该作业的 Hadoop 计数器的轻松访问。如果将 Hadoop 作业作为 <java> 调用，则保存和访问 Hadoop 作业的计数器会困难得多。行动。
2. 启动 <map-reduce> 的启动器 map task 操作立即完成，Oozie 直接管理 MapReduce 作业。这为 MapReduce 任务释放了一个 Hadoop 槽，否则在 <java> 的情况下，该槽将被启动器任务占用。行动。

因此，如果您想使用驱动程序类启动 MapReduce 作业，您可以使用 <java>行动并启动它。

OOzie Java Action Configuration .