gpt4 book ai didi

scala - 如何创建 Spark 事件以在 HDInsight 上运行 Scala 脚本?

转载 作者:行者123 更新时间:2023-12-03 02:59:44 25 4
gpt4 key购买 nike

我想使用 HDInsight 执行 Scala 脚本。下面的文章描述了运行 py 脚本,但没有提到 abt Scala。我按照这篇文章(而不是py文件,上传的Scala文件)但是Azure DataFactory无法执行并显示错误消息:

({
"errorCode": "2312",
"message": "Spark job failed, batch id:4",
"failureType": "UserError"
}

https://learn.microsoft.com/en-us/azure/data-factory/transform-data-using-spark

最佳答案

如果你想执行用scala编写的spark代码,那么你必须调用Jar文件。如果太复杂那么你也可以使用databricks笔记本。如果您遇到问题,请告诉我

关于scala - 如何创建 Spark 事件以在 HDInsight 上运行 Scala 脚本?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/50154437/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com