gpt4 book ai didi

hadoop - Oozie 作业使用 fork 而不是使用 join

转载 作者:可可西里 更新时间:2023-11-01 14:29:05 26 4
gpt4 key购买 nike

我正在创建一个工作流,我需要在其中 fork 3 个独立执行的作业。我没有加入的必要。有什么办法可以在 oozie 中实现这一目标吗?必须使用 fork 加入吗??

最佳答案

来自documentation

The fork and join nodes must be used in pairs. The join node assumes concurrent execution paths are children of the same fork node.'

文档还指出,

Oozie 对 fork 的工作流执行一些验证,如果违反则不允许作业运行。但是,如果您想要这种行为,您可以禁用 forkjoin validation 以便 Oozie 接受工作流。

对于特定的工作流程,在 job.properties 文件中将 oozie.wf.validate.ForkJoin 设置为 false。对于所有工作流程,在 oozie-site.xml 文件中将 =oozie.validate.ForkJoin= 设置为 false

此外,恕我直言,您可以直接加入,然后前进到end 节点。

关于hadoop - Oozie 作业使用 fork 而不是使用 join,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/20882108/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com