hadoop - 共享库大小在HDP 2.3.2.0-2950和HDP 2.3.0.0-2557之间变化

Question

我们已将HDP安装在两个版本为HDP 2.3.2.0-2950和HDP-2.3.0.0-2557的盒子上。似乎在2.3.0.0-2557版本的oozie共享库中缺少很多JAR文件。

在版本HDP 2.3.2.0-2950上-我们得到以下尺寸

-r--r--r--. 1 root      root   338855497 Oct  1 02:23 oozie-sharelib.tar.gz

在HDP-2.3.0.0-2557版本上-我们的尺寸越来越大

-r--r--r--. 1 root  root   226634871 Jul 14 20:39 oozie-sharelib.tar.gz

由于缺少JAR，我们无法在 2.3.0.0-2557上成功运行oozie job。

Answer 1

如果不检查Oozie日志，将很难找出所有Jar丢失了。
因此，如果要手动将所有Jar放置在SharedLib中，则必须检查Oozie SharedLib所需的Jar的“查找输出”列表，该列表可以与URL中的列出
Install oozie sharelib

只需收集Jar的列表并构建支持您的Hadoop＆Oozie版本的SharedLib，然后将其放入HDFS并检查状态即可

希望这些会有所帮助。