gpt4 book ai didi

hadoop - 纱作业失败,出现ClassNotFound异常,但在HADOOP_CLASSPATH中添加了jar

转载 作者:行者123 更新时间:2023-12-02 20:47:13 25 4
gpt4 key购买 nike

我对Hive WebHcat和Yarn有一些问题。
当我尝试通过curl在 hive 中创建表格时,例如:

curl -s -d execute="select+*+from+pokes;" \ -d statusdir="pokes.output" \
'http://localhost:50111/templeton/v1/hive?user.name=ekoifman'



https://cwiki.apache.org/confluence/display/Hive/WebHCat+Reference+Hive

和 yarn 容器失败与

Error: java.lang.ClassNotFoundException: org.apache.logging.log4j.spi.LoggerContextFactory



但是所需的jar存在于Hive类路径中,当我启动WebHcat时,我在 https://github.com/apache/hive/blob/master/hcatalog/webhcat/svr/src/main/bin/webhcat_server.sh#L211-L215的Hadoop类路径中显式添加了log4j-api-2.4.1.jar

因此,问题是为什么 yarn 容器无法找到降落在 hive 类路径中并明确添加到hadoop_classpath中的jar?

谢谢。

最佳答案

我将在 hive 类路径中已经存在的log4j库添加到yarn类路径后,问题解决了。

关于hadoop - 纱作业失败,出现ClassNotFound异常,但在HADOOP_CLASSPATH中添加了jar,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/47458278/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com