计算化学公社

 找回密码 Forget password
 注册 Register
Views: 25862|回复 Reply: 65
打印 Print 上一主题 Last thread 下一主题 Next thread

[综合交流] xeon 8375C ES双路使用感受

  [复制链接 Copy URL]

232

帖子

1

威望

3327

eV
积分
3579

Level 5 (御坂)

跳转到指定楼层 Go to specific reply
楼主
    我对计算化学一直保持浓厚的兴趣,常在论坛学习。研究生毕业后(研究生期间实验为主),自己终于有机会购买计算机做自己喜欢的研究。对比(Xeon 8275CL双路当时几家报价都在34000左右)和纠结好久后于2021年10月20日在*宝购买一套服务器,配置如下:   CPU Xeon 8375C(步进6,主频2.8G,实测满载3.3G)x 2,
   内存三星ECC 16G(3200 MHz)x 16,
   主板 超微X12DPI-N,
   电源海韵GX 1300W,
   固态PM983 1.92T U.2转PCI,
   散热 猫头鹰4189 U12 x2  搭配NF-A12X25 PWM风扇x4   
   机箱 先马黑洞玻璃侧透版 机箱自带两把12厘米风扇。
   无税价格:36700元  (店家在windows10专业版烤机三天后发货)

   作为新手,买到后自己使用软件满载烤机两天也没有出现问题,就装了centos 8.3系统。接下来,自己将遇到一系列问题与大家分享,避免掉坑里。
(1) 装完系统装vasp 6.1,发现intel 2019 update 1和intel 2020 update 4,在跑大体系是都会出现mpi内存泄漏被localhost杀掉,并且与Intel2019 update 1相比,intel 2020 update 4在同样体系中,计算速度慢了近30%。最后在QQ群求助,解决方法就是换用intel 2018 update1(ifort 18.0.5),后来同时编译vaspsol optcell vtst也能顺利通过,相比xeon 8280双路(centos 7.9, intel 2019 update1,vasp 6.1),满载速度提升在1.5-1.8倍。
(2)cp2k在MD大体系中速度太诱人了,就按照社长博文(http://bbs.keinsci.com/thread-21608-1-1.html)安装cp2k 8.2。采用toolchain结合intel 2018 update1 MKL数据库,gcc, intel mpi并行使用,速度和稳定性最好。另外采用博文(http://bbs.keinsci.com/thread-21668-1-1.html)里面SiC杂化泛函例子,相比较与E5 2696V3双路,计算耗时在3.5倍左右的提升。升级到cp2k 9.1过程中,编译elpa,总是不过,后来发现是elpa脚本默认采用ifort编译会打补丁,注释掉就能顺利编译通过,实测两个版本的速度差别不大,并且在GLOBAL部分不添加PREFERRED_DIAG_LIBRARY SL,也不会出现优化卡住的现象(http://bbs.keinsci.com/thread-25553-1-1.html)。曾经尝试singularity运行cp2k 8.2,总是singularity出现路径报错,后才google才智,可能是centos 8.3系统的问题,新版singularity(换名字了)没有测试。
  (3)  想安装Ambertools来产生拓扑文件,换用各种版本的ambertools编译过程总和intel mpi 冲突,导致cp2k和vasp无法使用,即使相应bashrc部分注释掉也不无法顺利编译。好在社长sobtop博文(http://bbs.keinsci.com/thread-27803-1-1.html)给我找到解决方法,直接安装sobtop就行,功能更强大。结合RESP计算电荷,简单的操作方法给我这样的小白带来福利。
(4)gromacs 2020.8 按照博文(http://bbs.keinsci.com/thread-11821-1-1.html)编译必须采用cmake3 .. -DCMAKE_INSTALL_PREFIX=/your/path/,亲测在centos8.1,8.3和8.5都要这样编译,结合-DGMX_BUILD_OWN_FFTW=ON这样不容易出现报错,并且编译会自动使用CPU AVX512指令集。
(5)X12DPI-N主板CPU1没有mos散热片,在这个机箱中发现CPU1 mos温度能到100度,甚至105度。CPU2 mos温度满载运行也在90以上,甚至能到97度。可能还是该主板供电设计用料的问题,正在定做散热片。
(6)先马黑洞玻璃侧透机箱对于这种配置需要加装额外的散热风扇,本机箱散热CPU风扇从下往上,其他风扇从前往后吹风。使用一段时间后,发CPU温度在85度左右,又在机箱顶部和机箱后面增加3把NF-A12X25 PWM,此后CPU温度满载稳定在75度左右,很多时候稳定在70度以内。满载噪声稳定40分贝。建议选用追风者614机箱,风道设计也更合理,存储扩展空间大。
(7)CPU功率真是大。满载运行cp2k 9.1  cp2k.popt 760W,g16 830W(g16.c.01 avx2),vasp 6.1 730W。所以选择该配置必须选好电源。要是加装GPU,电源最少1600W。现在Xeon 8375C(300W)正式版价格和ES差距不大,建议正式版。
  以上是本人使用该配置以来的感受,所遇到的问题和挑战在论坛和QQ群都能得到回复和解答,在此万分感谢。作为一名兴趣驱使的计算小白,期待cp2k培训班(希望我有时间参加)。

评分 Rate

参与人数
Participants 7
威望 +1 eV +25 收起 理由
Reason
Picardo + 5 谢谢
含光君 + 5 谢谢分享
乐平 + 5 谢谢分享
tkaray + 5 GJ!
静哥哥 + 4 赞!
bblovelp + 1
sobereva + 1

查看全部评分 View all ratings

60

帖子

0

威望

702

eV
积分
762

Level 4 (黑子)

65#
发表于 Post on 2023-2-2 16:33:15 | 只看该作者 Only view this author
wolfli369 发表于 2023-1-27 19:07
应该能,我是找人帮我做的队列系统。我现在是centos 8.5。master 8375C正式版,node1 8375C ES, SX6012交 ...

好的 ,谢谢老师,那我也找下人帮忙做个slurm作业系统。谢谢了

328

帖子

0

威望

1916

eV
积分
2244

Level 5 (御坂)

64#
发表于 Post on 2023-1-27 19:13:56 | 只看该作者 Only view this author
Entropy.S.I 发表于 2022-2-20 00:14
贵了吧,去年10月8375C ES只要6000左右。
另外,gmx啥时候有2020.8了?

步进6,不可能是es版本的。

232

帖子

1

威望

3327

eV
积分
3579

Level 5 (御坂)

63#
 楼主 Author| 发表于 Post on 2023-1-27 19:07:16 | 只看该作者 Only view this author
bblovelp 发表于 2023-1-27 16:01
老师,您好,请问下您的8375C ES 在centos8.3系统下能安装slurm作业系统吗。谢谢了。

应该能,我是找人帮我做的队列系统。我现在是centos 8.5。master 8375C正式版,node1 8375C ES, SX6012交换机,用起来很爽

60

帖子

0

威望

702

eV
积分
762

Level 4 (黑子)

62#
发表于 Post on 2023-1-27 16:01:21 | 只看该作者 Only view this author
老师,您好,请问下您的8375C ES 在centos8.3系统下能安装slurm作业系统吗。谢谢了。

232

帖子

1

威望

3327

eV
积分
3579

Level 5 (御坂)

61#
 楼主 Author| 发表于 Post on 2022-12-6 21:49:33 | 只看该作者 Only view this author
ltt_cfd 发表于 2022-12-6 19:00
感谢up分享,如果uP能贴一下各个配件的价格就更好了,也方便我们参考参考

店家给我组装的,只有整机价格

4

帖子

0

威望

15

eV
积分
19

Level 1 能力者

60#
发表于 Post on 2022-12-6 19:00:00 | 只看该作者 Only view this author
感谢up分享,如果uP能贴一下各个配件的价格就更好了,也方便我们参考参考

232

帖子

1

威望

3327

eV
积分
3579

Level 5 (御坂)

59#
 楼主 Author| 发表于 Post on 2022-11-3 13:46:43 | 只看该作者 Only view this author
xiaopo 发表于 2022-11-3 13:11
老哥,请问一下去哪儿定制的散热片呀,我这好像也没有散热片,奸商。。。

*报 逍遥DIY工作室。测试发现不要那个散热片也没有问题,主要你的机箱风道要合理,追风者614pc就行。

10

帖子

0

威望

36

eV
积分
46

Level 2 能力者

58#
发表于 Post on 2022-11-3 13:11:52 | 只看该作者 Only view this author
wolfli369 发表于 2022-3-21 13:39
CPU1 MOS上加载铝制散热片,室温21度,cp2k.popt (9.1版本)满载温度稳定在86度左右,vasp 6.1满载在78度。

老哥,请问一下去哪儿定制的散热片呀,我这好像也没有散热片,奸商。。。

328

帖子

0

威望

1916

eV
积分
2244

Level 5 (御坂)

57#
发表于 Post on 2022-10-17 21:36:35 | 只看该作者 Only view this author
biogon 发表于 2022-10-17 13:39
正式版现在都一万以上了,8000都是胡标的,商家回收的价格都不止8000了

攒点钱,弄个A100加速显卡做第一性原理计算可能更划算。现有的机器和cpu,丢了可惜,加钱做置换,又很不划算。

86

帖子

1

威望

1689

eV
积分
1795

Level 5 (御坂)

56#
发表于 Post on 2022-10-17 16:03:01 | 只看该作者 Only view this author
StephenCurry 发表于 2022-2-23 11:54
ES版会有ES字样吗?还是不能识别CPU型号?

不能识别

1236

帖子

1

威望

3495

eV
积分
4751

Level 6 (一方通行)

55#
发表于 Post on 2022-10-17 13:39:03 | 只看该作者 Only view this author
gog 发表于 2022-10-16 17:25
正式版,8000元/颗

正式版现在都一万以上了,8000都是胡标的,商家回收的价格都不止8000了

328

帖子

0

威望

1916

eV
积分
2244

Level 5 (御坂)

54#
发表于 Post on 2022-10-16 17:26:30 | 只看该作者 Only view this author
StephenCurry 发表于 2022-2-23 11:54
ES版会有ES字样吗?还是不能识别CPU型号?

步进比较低吧。

328

帖子

0

威望

1916

eV
积分
2244

Level 5 (御坂)

53#
发表于 Post on 2022-10-16 17:25:48 | 只看该作者 Only view this author
biogon 发表于 2022-2-21 11:26
现在正式版也就7000

正式版,8000元/颗

232

帖子

1

威望

3327

eV
积分
3579

Level 5 (御坂)

52#
 楼主 Author| 发表于 Post on 2022-8-3 14:37:35 | 只看该作者 Only view this author
ajacky007 发表于 2022-8-3 11:56
请问我用的超微X12DAI-N6的话,是不是也是没有cpu mos散热器啊?

我最初买cpu 1的mos上没有,后来有买一台直接让商家给赠送一个。没有图片我不确定你的情况?

手机版 Mobile version|北京科音自然科学研究中心 Beijing Kein Research Center for Natural Sciences|京公网安备 11010502035419号|计算化学公社 — 北京科音旗下高水平计算化学交流论坛 ( 京ICP备14038949号-1 )|网站地图

GMT+8, 2024-11-23 21:46 , Processed in 0.199865 second(s), 29 queries , Gzip On.

快速回复 返回顶部 返回列表 Return to list