slurm - 如何为 slurm 作业指定每个内核的最大内存

Question

我想为 slurm 中的批处理作业指定每个内核的最大内存量

我可以看到两个 sbatch 内存选项:

--mem=MB      maximum amount of real memory per node  required by the job.

--mem-per-cpu=mem   amount of real memory per allocated CPU required by the job.

这些选项中的任何一个都适合我的需要

关于如何实现这个目标的任何建议

Answer 1

您可以使用 --mem=MaxMemPerNode 为该节点中的作业使用最大允许内存。如果在集群中配置，您可以使用 scontrol show config 查看值 MaxMemPerNode。

一种特殊情况，设置 --mem=0 也会让作业访问每个节点上的所有内存。(这在异构集群中并不理想，因为最低内存值节点之间将仅用于所有分配的节点)。

如果在集群中配置，--mem-per-cpu=MaxMemPerCPU 可用于启用每个 cpu 的最大允许内存。