bash - 限制 SLURM 中运行的作业数量

Question

我在 SLURM 中排队多个作业。我可以限制 slurm 中并行运行的作业数量吗？

提前致谢!

Answer 1

如果您不是管理员，您可以 hold一些工作，如果你不希望他们同时开始，用scontrol hold <JOBID> ，您可以使用 sbatch --begin=YYYY-MM-DD 延迟提交某些作业.

此外，如果它是一个作业数组，您可以限制数组中同时运行的作业数量，例如 --array=1:100%25数组中有 100 个作业，但只有 25 个在运行。

最后，您可以使用 --dependency=singleton选项只允许一组具有相同 --job-name 的作业中的一个一次运行。如果您选择三个名称并将这些名称分配给您的所有作业并使用该选项，您实际上将自己限制为最多运行 3 个作业。