gpt4 book ai didi

java - Windows 环境上的 Apache Spark : spark. eventLog.dir

转载 作者:太空宇宙 更新时间:2023-11-04 13:38:19 25 4
gpt4 key购买 nike

我正在Windows环境下开发Spark 1.4。我必须设置 eventLog 目录,以便在应用程序完成后可以重新打开 Spark UI。

但是我无法设置eventLog.dir,它在Windows环境下给出错误。

配置是:

<entry key="spark.eventLog.enabled" value="true" />
<entry key="spark.eventLog.dir" value="file:///c:/sparklogs" />

我得到的异常:

java.io.IOException: Cannot run program "cygpath": CreateProcess error=2,  
The system cannot find the file specified
at java.lang.ProcessBuilder.start(Unknown Source)
at org.apache.hadoop.util.Shell.runCommand(Shell.java:206)

谁能给点建议吗?

最佳答案

我已经成功使用这种格式:

entry key="spark.eventLog.dir" value="c:////sparklogs" /> 

关于java - Windows 环境上的 Apache Spark : spark. eventLog.dir,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/31468716/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com