Dempey 发表于 2023-11-20 16:45
谢谢老师，问题解决了，就是内存导致的，mps和shard也可以正常使用了

你的多卡的机器mps和shard能正常调用多个gpu么

啊不错的飞过海 发表于 2023-11-20 16:23
不知道你的任务的ReqTRES里为什么会有mem这项，可能是slurm.conf里SelectTypeParameters=CR_Core_Memory这 ...

谢谢老师，问题解决了，就是内存导致的，mps和shard也可以正常使用了

不知道你的任务的ReqTRES里为什么会有mem这项，可能是slurm.conf里SelectTypeParameters=CR_Core_Memory这行的原因。
我推测被占住导致排队的资源不是GPU而是内存，把slurm.conf里SelectTypeParameters改成CR_Core试试；可能需要重启slurmd/slurmctld。

作业提交是走srun提交的还是sbatch提交的，脚本里是如何写的？
可以把scontrol show job 79和scontrol show job 80的信息一并放上来，单看configure好像没什么问题。