gpt4 book ai didi

log4j - 如何摆脱 "Using Spark' s 默认 log4j 配置文件 : org/apache/spark/log4j-defaults. 属性”消息?

转载 作者:行者123 更新时间:2023-12-04 05:17:32 25 4
gpt4 key购买 nike

我试图抑制消息

Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties

当我运行我的 Spark 应用程序时。我已成功重定向 INFO 消息,但是此消息一直显示。任何想法将不胜感激。

最佳答案

更简单的你只是cd SPARK_HOME/conf然后 mv log4j.properties.template log4j.properties然后打开log4j.properties并更改所有 INFOERROR .这里SPARK_HOME是 Spark 安装的根目录。

有些人可能正在使用 hdfs作为他们的 Spark 存储后端,并且会发现日志消息实际上是由 hdfs 生成的.要更改此设置,请转到 HADOOP_HOME/etc/hadoop/log4j.properties文件。只需更改 hadoop.root.logger=INFO,consolehadoop.root.logger=ERROR,console .再次HADOOP_HOME对我来说是你的 hadoop 安装的根,这是 /usr/local/hadoop .

关于log4j - 如何摆脱 "Using Spark' s 默认 log4j 配置文件 : org/apache/spark/log4j-defaults. 属性”消息?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/30924710/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com