计算化学公社

 找回密码 Forget password
 注册 Register
Views: 3726|回复 Reply: 16
打印 Print 上一主题 Last thread 下一主题 Next thread

[CP2K] 求助:cp2k计算过程中总是报错“内存不足”?

[复制链接 Copy URL]

37

帖子

0

威望

273

eV
积分
310

Level 3 能力者

跳转到指定楼层 Go to specific reply
楼主
本帖最后由 liheng 于 2023-3-15 23:50 编辑

各位老师好,
       我在跑cp2k的过程中遇到了严重的内存问题。用36核跑一个能量计算的任务,分配给每个cpu 6G的内存,也就是总共216G的内存。跑一个仅仅80个原子的任务,任务跑到中途就死掉了,然后提示内存不足,我不明白为什么会这样?虽然我用了k点 (5*5*1),也知道k点吃内存。但这似乎还是有点夸张,因为根据vasp的使用经验我认为自己的k点密度都已经很小了,毕竟我的cell 大约是(6*6*50埃)这样的尺寸。根据大师兄的说法这种情况下k点要(8*8*1)才够。可是我才(5*5*1)就不行了。请各位老师给出一点建议或方向?
以下是任务输入文件和slurm脚本

cp2k.inp

7.13 KB, 下载次数 Times of downloads: 75

job_cp2k-9.1.slurm

1.93 KB, 下载次数 Times of downloads: 33

145

帖子

0

威望

3113

eV
积分
3258

Level 5 (御坂)

17#
发表于 Post on 2024-9-9 13:07:13 | 只看该作者 Only view this author
liheng 发表于 2023-3-21 14:39
不好意思sob老师,我搞错了。不关MT的事,似乎是因为我的体系太大了,需要在在脚本的&GLOBAL ...

EXTENDED_FFT_LENGTHS
在GLOBAL里面加入这个倒是可以解决报错问题,但是对避免爆内存好像没有效果

10

帖子

0

威望

474

eV
积分
484

Level 3 能力者

16#
发表于 Post on 2024-8-3 21:00:56 | 只看该作者 Only view this author
相同的情况,请问最后楼主使用8.1的版本解决内存占用问题了吗?

5万

帖子

99

威望

5万

eV
积分
112354

管理员

公社社长

15#
发表于 Post on 2023-3-23 01:54:35 | 只看该作者 Only view this author
liheng 发表于 2023-3-22 16:09
所以您的建议是对我这种很厚的slab的情况还是使用XYZ(3D)周期性对吧,因为我看periodic只适用3D系统



并不存在“periodic只适用3D系统”这种说法。虽然MT大多数情况下是更好的选择,但不代表periodic就不适合,而且有表面偶极而在使用periodic时需要很大真空层才能达到收敛的情况还可以用偶极校正避免此问题
北京科音自然科学研究中心http://www.keinsci.com)致力于计算化学的发展和传播,长期开办高质量的各种计算化学类培训:初级量子化学培训班中级量子化学培训班高级量子化学培训班量子化学波函数分析与Multiwfn程序培训班分子动力学与GROMACS培训班CP2K第一性原理计算培训班,内容介绍以及往届资料购买请点击相应链接查看。这些培训是计算化学从零快速入门以及进一步全面系统性提升研究水平的高速路!培训各种常见问题见《北京科音办的培训班FAQ》
欢迎加入“北京科音”微信公众号获取北京科音培训的最新消息、避免错过网上有价值的计算化学文章!
欢迎加入人气非常高、专业性特别强的综合性理论与计算化学交流QQ群“思想家公社QQ群”:1号:18616395,2号:466017436,3号:764390338,搜索群号能搜到哪个说明目前哪个能加,合计9000人。北京科音培训班的学员在群中可申请VIP头衔,提问将得到群主Sobereva的最优先解答。
思想家公社的门口Blog:http://sobereva.com(发布大量原创计算化学相关博文)
Multiwfn主页:http://sobereva.com/multiwfn(十分强大的量子化学波函数分析程序)
ResearchGate:https://www.researchgate.net/profile/Tian_Lu
Money and papers are rubbish, get a real life!

37

帖子

0

威望

273

eV
积分
310

Level 3 能力者

14#
 楼主 Author| 发表于 Post on 2023-3-22 16:09:55 | 只看该作者 Only view this author
sobereva 发表于 2023-3-21 23:51
EXTRAPOLATION LINEAR_P T不在你提到的页面里
如果你确实需要计算这么厚的slab,PSOLVER应当用periodic ...

所以您的建议是对我这种很厚的slab的情况还是使用XYZ(3D)周期性对吧,因为我看periodic只适用3D系统

5万

帖子

99

威望

5万

eV
积分
112354

管理员

公社社长

13#
发表于 Post on 2023-3-21 23:51:31 | 只看该作者 Only view this author
liheng 发表于 2023-3-21 14:39
不好意思sob老师,我搞错了。不关MT的事,似乎是因为我的体系太大了,需要在在脚本的&GLOBAL ...

EXTRAPOLATION LINEAR_P T不在你提到的页面里
如果你确实需要计算这么厚的slab,PSOLVER应当用periodic,真空区可以小得多,速度也快得多。MT最适合较薄的slab,由于MT有非周期性方向盒子尺寸需要达到体系有电子密度分布的跨度的>=两倍的强制要求,因此用于很厚的slab很吃亏。
北京科音自然科学研究中心http://www.keinsci.com)致力于计算化学的发展和传播,长期开办高质量的各种计算化学类培训:初级量子化学培训班中级量子化学培训班高级量子化学培训班量子化学波函数分析与Multiwfn程序培训班分子动力学与GROMACS培训班CP2K第一性原理计算培训班,内容介绍以及往届资料购买请点击相应链接查看。这些培训是计算化学从零快速入门以及进一步全面系统性提升研究水平的高速路!培训各种常见问题见《北京科音办的培训班FAQ》
欢迎加入“北京科音”微信公众号获取北京科音培训的最新消息、避免错过网上有价值的计算化学文章!
欢迎加入人气非常高、专业性特别强的综合性理论与计算化学交流QQ群“思想家公社QQ群”:1号:18616395,2号:466017436,3号:764390338,搜索群号能搜到哪个说明目前哪个能加,合计9000人。北京科音培训班的学员在群中可申请VIP头衔,提问将得到群主Sobereva的最优先解答。
思想家公社的门口Blog:http://sobereva.com(发布大量原创计算化学相关博文)
Multiwfn主页:http://sobereva.com/multiwfn(十分强大的量子化学波函数分析程序)
ResearchGate:https://www.researchgate.net/profile/Tian_Lu
Money and papers are rubbish, get a real life!

37

帖子

0

威望

273

eV
积分
310

Level 3 能力者

12#
 楼主 Author| 发表于 Post on 2023-3-21 14:39:12 | 只看该作者 Only view this author
sobereva 发表于 2023-3-21 02:48
了解点MT的基本常识就知道用对你当前的体系MT必须有那么大的真空区,Multiwfn每个设置都有非常精心考量。 ...

不好意思sob老师,我搞错了。不关MT的事,似乎是因为我的体系太大了,需要在在脚本的&GLOBAL中加上:EXTRAPOLATION LINEAR_P T (https://manual.cp2k.org/cp2k-9_1 ... XTENDED_FFT_LENGTHS),加上之后就没事了.以下是Multiwfn生成的input文件

cp2k.inp

34.49 KB, 下载次数 Times of downloads: 30

5万

帖子

99

威望

5万

eV
积分
112354

管理员

公社社长

11#
发表于 Post on 2023-3-21 02:48:45 | 只看该作者 Only view this author
liheng 发表于 2023-3-20 22:52
sob老师,我按照您说的“二维周期体系不用PSOLVER ANALYTIC,要用MT”,可是cp2k-9.1(以及cp2k-8.1,都 ...

了解点MT的基本常识就知道用对你当前的体系MT必须有那么大的真空区,Multiwfn每个设置都有非常精心考量。分清楚nm和埃
别光说什么报错不报错,连个输入文件都不给,完全是毫无意义的提问。别以为不报错就代表合理。你倘若参加北京科音CP2K培训班系统性学学就知道analytic随真空区厚度的收敛性远远不如MT,所以analytic绝对不应当使用
北京科音自然科学研究中心http://www.keinsci.com)致力于计算化学的发展和传播,长期开办高质量的各种计算化学类培训:初级量子化学培训班中级量子化学培训班高级量子化学培训班量子化学波函数分析与Multiwfn程序培训班分子动力学与GROMACS培训班CP2K第一性原理计算培训班,内容介绍以及往届资料购买请点击相应链接查看。这些培训是计算化学从零快速入门以及进一步全面系统性提升研究水平的高速路!培训各种常见问题见《北京科音办的培训班FAQ》
欢迎加入“北京科音”微信公众号获取北京科音培训的最新消息、避免错过网上有价值的计算化学文章!
欢迎加入人气非常高、专业性特别强的综合性理论与计算化学交流QQ群“思想家公社QQ群”:1号:18616395,2号:466017436,3号:764390338,搜索群号能搜到哪个说明目前哪个能加,合计9000人。北京科音培训班的学员在群中可申请VIP头衔,提问将得到群主Sobereva的最优先解答。
思想家公社的门口Blog:http://sobereva.com(发布大量原创计算化学相关博文)
Multiwfn主页:http://sobereva.com/multiwfn(十分强大的量子化学波函数分析程序)
ResearchGate:https://www.researchgate.net/profile/Tian_Lu
Money and papers are rubbish, get a real life!

37

帖子

0

威望

273

eV
积分
310

Level 3 能力者

10#
 楼主 Author| 发表于 Post on 2023-3-20 22:52:43 | 只看该作者 Only view this author
本帖最后由 liheng 于 2023-3-20 22:56 编辑
sobereva 发表于 2023-3-15 23:58
二维周期性体系不要用PSOLVER ANALYTIC,要用MT。不要用太老的Multiwfn产生CP2K输入文件
CUTOFF完全没必要 ...

sob老师,我按照您说的“二维周期体系不用PSOLVER ANALYTIC,要用MT”,可是cp2k-9.1(以及cp2k-8.1,都测试了)会报错啊。错误:Index to radix array not found. 我用新旧Multiwfn分别生成了输入文件,新的会报错旧的不会。于是我控制变量把每一个不同都试了,最后发现是”MT“会报错。顺便再问一下,新的Multiwfn生成的二维周期体系输入文件的真空层是不是太大了,比如我一个5nm左右的例子,其真空层就有5~6nm,整个cell在Z方向有11nm

37

帖子

0

威望

273

eV
积分
310

Level 3 能力者

9#
 楼主 Author| 发表于 Post on 2023-3-20 16:32:03 | 只看该作者 Only view this author
reid 发表于 2023-3-16 23:20
http://bbs.keinsci.com/thread-21608-1-1.html  按照sob老师这个帖子装。原先用个人电脑算,只有使用PBE0 ...

我用cp2k-8.1跑了下没有问题。应该是我cp2k-9.1装得有问题

90

帖子

0

威望

998

eV
积分
1088

Level 4 (黑子)

8#
发表于 Post on 2023-3-16 23:20:45 | 只看该作者 Only view this author
http://bbs.keinsci.com/thread-21608-1-1.html  按照sob老师这个帖子装。原先用个人电脑算,只有使用PBE0或者算频率时才碰到过内存不足。其它时候还没碰到过。

37

帖子

0

威望

273

eV
积分
310

Level 3 能力者

7#
 楼主 Author| 发表于 Post on 2023-3-16 00:42:11 | 只看该作者 Only view this author
sobereva 发表于 2023-3-16 00:27
slurm的事我不清楚,纯泛函算能量或者受力能占360GB内存肯定是没正常运行。k点、CUTOFF都是题外话。可能 ...

谢谢老师,我下去再试一下

37

帖子

0

威望

273

eV
积分
310

Level 3 能力者

6#
 楼主 Author| 发表于 Post on 2023-3-16 00:41:31 | 只看该作者 Only view this author
anson 发表于 2023-3-16 00:36
扔36核机器上没爆内存,也就48G/128G。k点放大到6×6×1占到了70G,依然没爆。
合理怀疑是slurm或者intelm ...

好的,谢谢。我先试下

119

帖子

2

威望

1849

eV
积分
2008

Level 5 (御坂)

naïve

5#
发表于 Post on 2023-3-16 00:36:59 | 只看该作者 Only view this author
扔36核机器上没爆内存,也就48G/128G。k点放大到6×6×1占到了70G,依然没爆。
合理怀疑是slurm或者intelmpi的锅
too young, too simple, sometimes naïve

5万

帖子

99

威望

5万

eV
积分
112354

管理员

公社社长

4#
发表于 Post on 2023-3-16 00:27:09 | 只看该作者 Only view this author
liheng 发表于 2023-3-16 00:02
我用的是3.8 (dev)版本的Multiwfn;
我用CUTOFF 350 也报错;
您觉得有没有可能是cp2k编译或者intel_m ...

slurm的事我不清楚,纯泛函算能量或者受力能占360GB内存肯定是没正常运行。k点、CUTOFF都是题外话。可能编译有问题,也可能运行方式有问题。若无特殊情况,建议用OpenMPI。并且注意编译用的MPI和运行用的MPI必须一致。
北京科音自然科学研究中心http://www.keinsci.com)致力于计算化学的发展和传播,长期开办高质量的各种计算化学类培训:初级量子化学培训班中级量子化学培训班高级量子化学培训班量子化学波函数分析与Multiwfn程序培训班分子动力学与GROMACS培训班CP2K第一性原理计算培训班,内容介绍以及往届资料购买请点击相应链接查看。这些培训是计算化学从零快速入门以及进一步全面系统性提升研究水平的高速路!培训各种常见问题见《北京科音办的培训班FAQ》
欢迎加入“北京科音”微信公众号获取北京科音培训的最新消息、避免错过网上有价值的计算化学文章!
欢迎加入人气非常高、专业性特别强的综合性理论与计算化学交流QQ群“思想家公社QQ群”:1号:18616395,2号:466017436,3号:764390338,搜索群号能搜到哪个说明目前哪个能加,合计9000人。北京科音培训班的学员在群中可申请VIP头衔,提问将得到群主Sobereva的最优先解答。
思想家公社的门口Blog:http://sobereva.com(发布大量原创计算化学相关博文)
Multiwfn主页:http://sobereva.com/multiwfn(十分强大的量子化学波函数分析程序)
ResearchGate:https://www.researchgate.net/profile/Tian_Lu
Money and papers are rubbish, get a real life!

手机版 Mobile version|北京科音自然科学研究中心 Beijing Kein Research Center for Natural Sciences|京公网安备 11010502035419号|计算化学公社 — 北京科音旗下高水平计算化学交流论坛 ( 京ICP备14038949号-1 )|网站地图

GMT+8, 2024-11-24 03:51 , Processed in 0.180856 second(s), 25 queries , Gzip On.

快速回复 返回顶部 返回列表 Return to list