gpt4 book ai didi

java - 运行Shell脚本作为Spark作业的一部分

转载 作者:行者123 更新时间:2023-12-02 20:58:27 27 4
gpt4 key购买 nike

我正在使用包含框架脚本执行的spark Submit提交sparkjob。
我将脚本执行的逻辑编写为:

 val paraname = encFile.substring(0,encFile.length()-4)
val pb = new ProcessBuilder("/home/roswal01/gpghdfs.sh",paraname)
val p : Process = pb.start()

但是当我通过 Spark 作业运行它时,出现了以下错误
java.io.IOException: Cannot run program

这可能是什么问题?

最佳答案

是否可能未在bash文件上设置可执行属性,例如

chmod +x /home/roswal01/gpghdfs.sh

关于java - 运行Shell脚本作为Spark作业的一部分,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/43848820/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com