python - pySpark 项目的 Azure DevOps CI 管道

Question

我正在尝试在我的几个 pyspark 项目上实现 azure devops。

一些项目是在 pyCharm 中开发的，一些是在带有 python API 的 intelliJ 中开发的。

下面是git仓库中提交的代码结构。

setup.py 是用于创建 .egg 文件的构建文件。

我尝试了如下所示的几个步骤来在 DevOps 中创建构建管道。 但是 python 安装部分/执行部分失败并出现以下错误。

##[error]The process 'C:\hostedtoolcache\windows\Python\3.7.9\x64\python.exe' failed with exit code 1

我更喜欢 UI API 来构建和创建 .egg 文件，如果不可能的话 YAML 文件。

感谢任何线索!

Answer 1

我使用了使用Python步骤，然后一切都像魅力一样工作

您能显示安装Python步骤的详细信息吗？