计算化学公社

标题: 2023年3月MD benchmark测试中篇——W790平台首发测试(量化乱入) [打印本页]

作者
Author:
Entropy.S.I    时间: 2023-3-22 18:32
标题: 2023年3月MD benchmark测试中篇——W790平台首发测试(量化乱入)
本帖最后由 Entropy.S.I 于 2023-6-25 01:17 编辑

2023年3月MD benchmark测试中篇
——W790平台首发测试(量化乱入)
[本文首发于计算化学公社 | 文 熵增焓减 | yult-entropy@qq.com | 2023-03]
本系列文章另外2篇:首篇——4090悄悄变快了最终章——关于“跑经典MD的计算机到底选什么配置”的终极讨论
0 写在前面

近期intelW790平台的系列产品即将或已经上市,笔者对其中2个具有代表性的型号进行了性能测试,分别是intel Xeon w7-2495X和intel Xeon w9-3495X。

本文MD测试部分只包括GROMACS 2023,其中所用模型与此系列首篇完全一致;另增加了Gaussian16 Rev. C.02 AVX2和ORCA 5.0.4这2个量子化学程序的测试,具体信息在后文介绍。


1 测试平台

硬件:

(, 下载次数 Times of downloads: 35)

W790平台CPU超频参数(AiTweaker):ASUS MultiCore Enhancement [Enabled - Removelimits],CPU Core Ratio [By Core Usage],DIGI+ VRM > CPU Load-line Calibration [Level 7],Internal CPU Power Management > Maximum CPU core Temperature [105]。3495X核心电压Auto,2495X所有核心电压offset调为+0.15V。

需要注意的是,GPU加速GMX时CPU浮点计算压力较低,功耗不高,超频调试思路与CPU密集型应用有巨大差别,后者一般不能给太高的核心电压,甚至需要降压超频,而前者应当保证核心电压足够高,用降压超频的思路反而不稳定。

CPU散热器采用ABEE SPR360,该散热器能将920W的3495X和650W的2495X的核心温度控制在100℃以内。

软件环境:Ubuntu 22.04.2 LTS Desktop; Linux version 5.19.0-35-generic x86_64; GNU11.3; CUDA Toolkit 12.1; NVIDIA GPU Driver 530.30.02

若使用Sync All Cores方式超频3495X,在Linux下有不能解释的bug:空载功耗360W,运行低负载任务(如解压压缩包、测试核间延迟、使用较少核心运行GPU加速GMX等)性能异常地弱,大约只有正常的十分之一,但检查所用到的CPU核心频率是正常的;满载性能趋向正常,例如运行mlc(intel的内存带宽/延迟测试工具),让CPU接近满载,此时运行其他低负载的任务性能就基本恢复正常了。


2 新平台搭配RTX4090加速GROMACS的性能

对于核数如此多的CPU,考察GMX比考察其他纯GPU方案的MD程序更有意义。图1展示了相关测试结果。其中3495X只展示了前32核的数据,一方面由于需要给其他核数较少的CPU留出空间以便于阅读,另一方面由于32核后曲线接近水平,展示价值不大。若要了解详细数据(包括3495X完整数据),可下载SI阅读。需要注意的是,对于支持超线程的CPU核心,1核的含义是用完2个逻辑核心。

去年10月文章中提到,CPU核心间延迟对GPU加速GMX的性能有负面影响,因此本轮测试最先做的就是核间延迟测试。2495X和3495X的核间延迟测试结果此前已公开在BB空间GitHub上。

(, 下载次数 Times of downloads: 34)
图1 (此图使用广色域屏幕并尽可能放大后阅读更佳)

从图中首先可以看出,同样模式中,在前8核时,2495X和3495X相较于7950X和13900KF仍有可观测的差距,而8核之后2495X和3495X全“大核”且核间延迟均匀的优势就有明显体现,逐渐接近并反超7950X和13900KF。

对于7950X和13900KF,多数情况下超过8核性能提升就不明显了;而对于2495X和3495X,多数情况下12核之后性能提升也不明显。其中GPU-resident模式(bonded GPU)到达平台区更早。显然,对于2495X和3495X这样极为昂贵、扩展性极强的CPU来说,最合适的做法是1颗CPU配合多块RTX4090,每块RTX4090分配8~12核;而对于7950X和13900KF,若要追求极致性价比,也可搭配2块RTX4090,若预算很少,还可用8核的7700X搭配1块RTX4090。关于具体的硬件搭配,在此系列文章的最终章会有详细讨论。另外,实际使用时也要注意最好给CPU留出至少1个逻辑核心用于处理系统进程和驱动开销,但如果是类似于2495X配3块4090这样可以刚好把所有CPU资源平均分配完,同时又需要用脚本批量、连续运行MD模拟+数据分析的情况,也可自行考虑是否留出1个逻辑核心(如果只让其中一个任务留出1个逻辑核心,可能需要写至少2,操作起来比较复杂),比较好的做法是每个任务都留出1个逻辑核心,这样每个任务速度基本相同,操作也不需要增加额外的复杂度。


3 特别篇:w9-3495X的Gaussian和ORCA性能

由于Gaussian和ORCA对CPU压力较大,故对3495X使用降压超频,将所有核心电压offset调为-0.1V,全核频率降为4.5GHz。

本节测试使用了武汉大学钟成老师开发的xbench3测试脚本,同时也参考了计算化学公社上已有测试所用的关键词。测试所用的体系是最经典的Gaussian Test0397,没有测试多个任务的性能,因为3495X主要优势就在于能够以更少的物理核心数达到与服务器CPU相似的理论多核性能,只测试优势项目就够了。

(, 下载次数 Times of downloads: 34)

图2用双路EPYC 7T83、双路EPYC 9554和双路Xeon 8375C作为对比,在“b3lyp 3-21g force scf=novaracc”关键词下,w9-3495X大幅领先于EPYC7T83和双路Xeon 8375C,略强于双路EPYC7T83,但弱于单路EPYC 9554。

至于更进一步的测试,由于和其他CPU的对比都是从网络上拼凑出来的(来源:epyc 9554初测 gaussian 16g16在8375C和7T83的表现小测评ORCA并行效率小测试淘宝上购买的双路EPYC 7R32 96核服务器的使用感受和杂谈),故数据不是很全,难以制图,只能以表格的形式公布。

(, 下载次数 Times of downloads: 35)

从表2中可以发现,3495X在耗时较长的任务(即所谓的“大任务”)下可以击败单路EPYC 9554,但在“小任务”下仍不如单路EPYC 9554。在表3的ORCA测试结果中,3495X完全领先于双路EPYC 7T83和双路Xeon 8375C。此外,不论Gaussian还是ORCA,3495X在任何时候都领先于EPYC7T83和双路Xeon 8375C,在绝大多数情况下领先于双路EPYC7T83。

上述情况是非常、非常令人意外的,因为EPYC 9554的理论多核性能比全核心4.5GHz的w9-3495X弱,理论上来说前者运行Gaussian和ORCA的性能不应该比后者强。目前只能找到1个明确的原因从一定程度上解释此状况,但不能完全解释。3495X在跑较小的任务时单轮SCF计算很快,而在切换到下一轮时有一个CPU负载较低的阶段,于是CPU在高负载和低负载之间快速反复切换,相应地,CPU频率也在高低之间快速反复切换,低负载时CPU频率只有2.9GHz甚至1.9GHz(即baseclock),且从低频切换到高频的反应比较迟钝,频率boost机制不能很好地发挥,影响了性能,这可能由于BIOS没有优化到位(类似的问题在默认BIOS设定下测试CPU核间延迟时也存在,笔者在GitHub上和网友提到过此事)。另一个可能的原因是w9-3495X的RAM只有8通道DDR5 4800MT/s,与AMD EPYC 9004系列的12通道DDR5 4800MT/s相差极大,故w9-3495X超频至全核心4.5GHz后的高频优势被EPYC 9004系列的内存带宽优势扳回。

总之,由于w9-3495X超频后全核频率达到4.5GHz,能够以更少的物理核心数达到与双路EPYC 7T83/7763相同的理论多核性能,减弱了高并行度下的边际效应,故w9-3495X在Gaussian和ORCA战胜了双路EPYC 7T83;但又由于各方面的、已确认或还未确认的原因,w9-3495X似乎不能超过单路EPYC 9554。需要注意的是,互联网上关于EPYC 9554的测试没有给出详细的关键词(例如是否加了“scf=novaracc”,这非常重要),结合目前令人意外的对比结果,关于w9-3495X不如EPYC 9554的结论有待进一步确认。


4 图一乐:w9-3495X的R23分数

用的是测Gaussian和ORCA时的超频设置,R23分数108016pts,只跑了2min,若用默认的10min设置,由于偶尔触及功耗上限和温度上限导致部分核心偶尔降频,最终分数会更低一些。

至于其他大众关心的测试项目,@普普通通Tony大叔已于昨晚发布了相关内容,可前往观看

(, 下载次数 Times of downloads: 35)

5 硬件前瞻

2024世代的CPU(intel Redwood+ Cove / Lion Cove和AMD Zen5)的IPC提升很可能比较大,这对GPU加速来说是个好消息,值得期待。具体地说,今年下半年发布的P-Core微内核架构为Redwood Cove (intel 4)的Meteor Lake由于频率和核心数双双退步,故其实际性能并不值得期待(至今不能确定这一代是否有桌面版,看起来极有可能是没了),但可以期待2024年发布的基于Redwood+ Cove (intel 3)微内核架构的Granite Rapids-SP和基于Lion Cove微内核架构的Arrow Lake-S;而AMD Zen5目前只能根据极为有限的信息源了解到IPC有较大提升。


SI

经简单整理的测试结果原始数据(MD_benchmark_data_Mar2023_Pub2.xlsx)。文件下载地址:https://www.aliyundrive.com/s/SizpbDitRtM,提取码:n2k7;也可在此贴附件区下载。




作者
Author:
tiandikuoyuan    时间: 2023-3-23 09:25
Ubuntu是不是还没来得及对新CPU做优化?
作者
Author:
ggdh    时间: 2023-3-23 09:47
把测的这么好的一个QC的特别篇隐藏在MD benchmark中是什么意思。。。
作者
Author:
Entropy.S.I    时间: 2023-3-24 01:11
tiandikuoyuan 发表于 2023-3-23 09:25
Ubuntu是不是还没来得及对新CPU做优化?

也许吧
作者
Author:
喵星大佬    时间: 2023-4-18 04:01
量化的测试可以加上2495X的结果
相较3495X用户可能更多一点
作者
Author:
Entropy.S.I    时间: 2023-4-22 23:12
喵星大佬 发表于 2023-4-18 04:01
量化的测试可以加上2495X的结果
相较3495X用户可能更多一点

才4通道内存,还贵死,没人会买这东西来跑量化的。3495X都很不推荐买来跑量化,带GPU加速才是最好的用途
作者
Author:
SchrodingersCat    时间: 2023-9-1 16:38
9554 + 4090怎么样,理论上是不是不会出现7R32那样抑制4090性能的情况?
作者
Author:
Entropy.S.I    时间: 2023-9-1 16:49
SchrodingersCat 发表于 2023-9-1 16:38
9554 + 4090怎么样,理论上是不是不会出现7R32那样抑制4090性能的情况?

不推荐。
作者
Author:
SchrodingersCat    时间: 2023-9-1 18:29
Entropy.S.I 发表于 2023-9-1 16:49
不推荐。

好的,那我还是考虑买两台机




欢迎光临 计算化学公社 (http://bbs.keinsci.com/) Powered by Discuz! X3.3