gpt4 book ai didi

python - 是否可以在 HTCondor 中检索 python 脚本的输出?

转载 作者:行者123 更新时间:2023-12-05 07:27:29 26 4
gpt4 key购买 nike

我想运行一些 python 脚本,这些脚本在 HTCondor 管理的集群上返回一些字典。我在另一个运行 MPI/Slurm 和 mpi4py 的集群上运行相同的程序,我能够在不保存文件的情况下收集输出并将它们传输到主节点。我无法理解如何在 HTCondor 中执行此操作(即使使用 python 包装器)。

是否可以在 HTCondor 中检索 python 脚本的输出?我是否需要使用 schedd.retrieve("ClusterId == %d"% cluster) 命令?如果是这样,我们将不胜感激。

谢谢!

最佳答案

您可以在您的提交文件中指定一个您想要保存标准输出的文件(另见 Condor output file updating )。

您可以使用 htcondor_tail 查看输出(不确定 python api 中的等效项是什么)。

稍微偏离主题:如果你运行 python,你也可以使用例如Dask 做你的远程 python 事情(另见 Dask with HTCondor scheduler )

关于python - 是否可以在 HTCondor 中检索 python 脚本的输出?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/53950764/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com