计算化学公社

 找回密码 Forget password
 注册 Register
Views: 15030|回复 Reply: 28
打印 Print 上一主题 Last thread 下一主题 Next thread

[硬件评测] [11/28/21更新]12900KF G16 和 ORCA5 大小核心调度测试(Win11,虚拟机,WSL2 和原生L...

[复制链接 Copy URL]

320

帖子

1

威望

5357

eV
积分
5697

Level 6 (一方通行)

本帖最后由 paramecium86 于 2022-5-31 03:10 编辑

****************************
05/31/2022 更新 使用 Ubuntu22 + Kernel 5.18
G16 0397 几乎没有统计意义上的区别
ORCA5的任务
双杂化单点(分钟) nprocs                     8        12      16
Ubuntu20                                          23.2   22.3    21.2
Ubuntu22+kernel5.18                         18.3   21.3    18

基本上看出 调度上确实新版kernel有提升。 但是这个数据依然比不上MSMPI win版下的数据(24核 14分钟)
********************************
测试平台
12900KF / 开启华硕AI超频 /32GB DDR4 3600  Win11
12900KF  8大核16线程+8小核心对比平台
5900X/ 强制PBO/32GB DDR4 3600 Win11
5900X 12核心24线程
高斯的测试文件使用老朋友Test0397

1. 首先尝试了 VMware16 Pro +CentOS8 发现调度出现问题。无论如何设置%nproc或者 %cpu, 都仅能调动8个小核,所有大核齐刷刷围观。测试成绩惨不忍睹。

2. 使用WSL2 看起来调度正常。所以测试中使用了WSL2。
测试结果如下图1-3



从测试可以看出关闭超线程对于速度有大约10%的提升。并且看起来无论是超线程还是小核心对于高斯的计算应该是没有帮助。8核心最快。
另外在计算中发现虽然看起来%CPU会比%nproc略快一点但是从任务管理器里查看,发现并没有锁定CPU。应该是12代线程调度器和%CPU 可能并无法一起工作。

作为对比我把我以前测过的一些平台上的0397的数据以及让朋友帮我测的和论坛上一些帖子里的结果都放在下面的表格里仅供大家参考。(测试中发现R9 5900X 在win11下比win10慢10%左右,我是用的win11已经是打过AMD补丁的版本。但是还是降了不少效能。)
参考的帖子如下
http://bbs.keinsci.com/thread-26448-1-1.html
http://bbs.keinsci.com/thread-19256-1-1.html

12楼
7502机器有空随便跑了一波分,单路@3.1G平均52s,双路@3.02G平均36s
我刚才试了试8352Y双路,32核平均48s
不过用两个CPU就莫名其妙的耗时增加了
用%CPU指定以后就正常了,平均耗时36s

Biogen大佬测了AMD Rome和三代Scalable的Test0397速度。


以下更新ORCA5.0测试结果

测试计算为 瑞德西韦分子的双杂化单点能计算
! PWPB95 D3 def2-TZVPP def2/J def2-TZVPP/C RIJCOSX tightSCF noautostart miniprint nopop
输入文件见附件。
分别测试了1. 12900KF 默认全开(包括大核心小核心和超线程)
                2. 12900KF 关闭超线程
                3. 12900KF 关闭小核心
                4 5900X作为对比
并分别使用了虚拟机上和win版ORCA5.0.1进行测试。
结果如 图4

总结如下
1. 和高斯的测试类似,虚拟机依然只能调用小核心,猜测这是VMware或者Win11还没有做好适配。或许未来更新版本后会有改观。在关闭小核心后VMware可以正常调用大核心运算。但是速度相比于win版ORCA,要慢一些。而作为对比,在5900X平台上,还是虚拟机平台运行较快。
2. 在相同的nproc设置下,总是关闭超线程时候的win版ORCA最快。而关闭小核心时候最慢。
3. 默认全开且使用全部24线程时候速度最快(14min),而关闭超线程,调用全部大核心和小核心(nproc=16)用时(15.2min);而关闭小核心,仅仅调用大核心和超线程(nproc=16)速度是 (18.6min)
      对比之下,5900X是使用nproc=12 在VMware下速度最快(21.2min)

总的来说,ORCA和高斯调用12代大小核在win11下有些相似。只是高斯应该要关掉超线程会比较快。而ORCA可以保留着超线程。会得到些微的速度提升。而小核心目前来看会对计算速度起到正面作用 但是应该要等待后续VMware或者win11的更新才能正常在虚拟机下进行计算。

*************************************************************以下更新原生linux平台测试结果
使用版本 Ubuntu 20  LTS 默认 Linux内核 5.1

结果如图5,图6

可以看出在原生Linux下,12代大小核的调度略有不同。总结如下
1. Gaussian16 A.03 AVX2
在原生Linux下高斯的 %CPU可以成功地绑定核心。在一些测试后发现。
a. 小核心大概是50%大核心的性能。并且并行计算能力稍微弱于大核心。
b. 超线程对于计算没有任何帮助。可以关掉。
c. 虽然小核心对于计算有些许帮助,但是因为高斯的并行核心多了之后效率同样会下降。全开8大+8小 和 单独用8大核基本上没有任何区别。
d. Win11的WSL2 速度 和 原生Ubuntu20下跑高斯速度基本是一致的。

2. ORCA5.0
a. 经过测试,Ubuntu20下用OpenMPI的ORCA5.0.1 速度比Win11下的使用MSMPI的 win版ORCA5速度要慢。
b. 在Ubuntu20下 超线程和小核心对于ORCA的计算看起来都没有什么帮助,只保留大核的情况下速度最快(但是仍然赶不上24线程全部调用的ORCA5 win版)

经过一系列测试,我目前的看法是12代买来当做入门的一台量化计算的机器并不是很好的选择。虽然大核心性能强悍,已经略微强过5900X,但是大小核的调用不同情况下存在差异。没准不同的软件不同的操作系统都会不同。不如用5950X这类纯大核的·CPU来的省心。如果买了12代平台只是兼顾做计算,只为计算速度的话没必要安装原生Linux. 高斯用WSL2 ,ORCA使用Win版的ORCA会是目前看起来最好的选择。
*********

11/28/2021更新

有坛友提到可以试一试不同的Linux发行版。
测试了一下CentOS8 Stream的版本如图7,图8
对于Gaussian16
如果默认使用%nproc看起来是CentOS8 比Ubuntu20更快一点点。如果是用%CPU绑定核心,那么二者差不多。
对于ORCA5.0.1
CentOS 4核 8核 12核都快过Ubuntu并在12核达到最快。而在16核的时候反而变慢了。这也看出来linux对于12代的调度还是有问题。总的来说还是Win版的ORCA5 运行要比在linux上快不少。

0397对比.jpg (336.07 KB, 下载次数 Times of downloads: 104)

图3_0397各种平台对比

图3_0397各种平台对比

12900k_table.jpg (62.92 KB, 下载次数 Times of downloads: 96)

图1_12900K table

图1_12900K table

12900k_chart.png (90.13 KB, 下载次数 Times of downloads: 85)

图2_12900K chart

图2_12900K chart

orca测试.jpg (285.45 KB, 下载次数 Times of downloads: 82)

图4_ORCA测试

图4_ORCA测试

Ubuntu20_orca.jpg (60.16 KB, 下载次数 Times of downloads: 90)

图6_Ubuntu20_ORCA5

图6_Ubuntu20_ORCA5

Ubuntu20_g16.jpg (171.41 KB, 下载次数 Times of downloads: 87)

图5_Ubuntu20_G16

图5_Ubuntu20_G16

Picture2.jpg (49.24 KB, 下载次数 Times of downloads: 87)

图7 ORCA5 Ubuntu vs CentOS

图7 ORCA5 Ubuntu vs CentOS

Picture1.jpg (132.23 KB, 下载次数 Times of downloads: 91)

图8 G16 Ubuntu vs CentOS8

图8 G16 Ubuntu vs CentOS8

pwpb95_TZ_24cpu.inp

4.58 KB, 下载次数 Times of downloads: 22

评分 Rate

参与人数
Participants 4
威望 +1 eV +15 收起 理由
Reason
muuu2333 + 5 GJ!
akber123 + 5 好物!
ChrisZheng + 5 谢谢
sobereva + 1

查看全部评分 View all ratings

1236

帖子

1

威望

3495

eV
积分
4751

Level 6 (一方通行)

2#
发表于 Post on 2021-11-19 14:42:41 | 只看该作者 Only view this author
本帖最后由 biogon 于 2021-11-19 14:52 编辑

我刚才试了试8352Y双路,32核平均48s
不过用两个CPU就莫名其妙的耗时增加了
用%CPU指定以后就正常了,平均耗时36s

这个单路比我以前测的双路6254快了一倍不止

125

帖子

0

威望

2168

eV
积分
2293

Level 5 (御坂)

3#
发表于 Post on 2021-11-19 17:15:49 | 只看该作者 Only view this author
本帖最后由 ahxb 于 2021-11-19 17:18 编辑

这么看来小核没什么用,真要买的话不如12700K/KF,8大4小,还省些钱,功耗也小些,就是缓存小点(L3 25MB,L2 12MB,分别比12900K/KF小了5MB和2MB),可能是按照2小核=1大核砍的,估计影响不大。
WSL2和虚拟机的效率应该差不多,12900K约等于5900X,应该是5900X跨CCD通讯拖了后腿。和5950X估计还有20%-25%的差距。
E5 V3和V4系列确实老了,但毕竟也有年头了,CPU和内存确实很便宜,尤其是E5 2696 V3,但库存主板是越来越少了。
另外想看看ORCA的调度和并行效率怎么样,如果在windows和linux下都能调用8大核跑的话那确实不错,但兼容性还有些小毛病,可能虚拟机里有些程序有问题。据说12400只有6大核,等明年b660主板出了之后,只用高斯计算的学生想买台自用机的话,12700K/KF或12400+b660主板+16g/32g ddr4内存应该是不错的选择。

299

帖子

0

威望

1922

eV
积分
2221

Level 5 (御坂)

4#
发表于 Post on 2021-11-19 17:17:46 | 只看该作者 Only view this author
biogon 发表于 2021-11-19 14:42
我刚才试了试8352Y双路,32核平均48s
不过用两个CPU就莫名其妙的耗时增加了
用%CPU指定以后就正常了,平 ...

你这个是我看到的最高纪录了,是默认的gaussian16  test0397数值精度吗?

我看到的最快也要71秒,你这个36秒,快了一倍了

320

帖子

1

威望

5357

eV
积分
5697

Level 6 (一方通行)

5#
 楼主 Author| 发表于 Post on 2021-11-19 17:41:43 | 只看该作者 Only view this author
biogon 发表于 2021-11-19 14:42
我刚才试了试8352Y双路,32核平均48s
不过用两个CPU就莫名其妙的耗时增加了
用%CPU指定以后就正常了,平 ...

83xx这么猛呀。那更期待Sapphire Rapid这代的服务器U了。大核效能如此好。怼到几十核心算力还是很可观的。应该不输EPYC的旗舰了。

320

帖子

1

威望

5357

eV
积分
5697

Level 6 (一方通行)

6#
 楼主 Author| 发表于 Post on 2021-11-19 17:44:22 | 只看该作者 Only view this author
ahxb 发表于 2021-11-19 17:15
这么看来小核没什么用,真要买的话不如12700K/KF,8大4小,还省些钱,功耗也小些,就是缓存小点(L3 25MB, ...

确实是。按我目前这个测的结果来看, 12700k 跑高斯应该和12900k差不多。还能便宜好多。等板子便宜了应该挺挺值的。可惜这次没试成 DDR5 对于跑计算有没有加成。

125

帖子

0

威望

2168

eV
积分
2293

Level 5 (御坂)

7#
发表于 Post on 2021-11-19 19:30:58 | 只看该作者 Only view this author
paramecium86 发表于 2021-11-19 17:44
确实是。按我目前这个测的结果来看, 12700k 跑高斯应该和12900k差不多。还能便宜好多。等板子便宜了应该 ...

双通道中高频ddr5内存的带宽说不定能赶上不少服务器上的四通道2133mhz ddr3内存,大多数量化计算不重要,另外据说把小核全关掉后avx512也能用,用vasp的可能用得上。但vasp我没怎么用过,似乎是需要自己编译,并且用mpi并行?可能有不小的概率出问题。

1236

帖子

1

威望

3495

eV
积分
4751

Level 6 (一方通行)

8#
发表于 Post on 2021-11-19 19:33:49 | 只看该作者 Only view this author
gauss98 发表于 2021-11-19 17:17
你这个是我看到的最高纪录了,是默认的gaussian16  test0397数值精度吗?

我看到的最快也要71秒,你这 ...

都是默认设置,如果用8378C 8375C等更高功耗的,双路30s内都有可能

1236

帖子

1

威望

3495

eV
积分
4751

Level 6 (一方通行)

9#
发表于 Post on 2021-11-19 19:45:58 | 只看该作者 Only view this author
paramecium86 发表于 2021-11-19 17:41
83xx这么猛呀。那更期待Sapphire Rapid这代的服务器U了。大核效能如此好。怼到几十核心算力还是很可观的 ...

反正这个单路吊打6254确实是出乎意料了

320

帖子

1

威望

5357

eV
积分
5697

Level 6 (一方通行)

10#
 楼主 Author| 发表于 Post on 2021-11-19 20:24:11 | 只看该作者 Only view this author
biogon 发表于 2021-11-19 19:45
反正这个单路吊打6254确实是出乎意料了

这可能说明之前从E5时代到2代 Scalable 一直都是14nm, 这牙膏真是没多少可以挤。。。

320

帖子

1

威望

5357

eV
积分
5697

Level 6 (一方通行)

11#
 楼主 Author| 发表于 Post on 2021-11-20 10:54:01 | 只看该作者 Only view this author
ahxb 发表于 2021-11-19 17:15
这么看来小核没什么用,真要买的话不如12700K/KF,8大4小,还省些钱,功耗也小些,就是缓存小点(L3 25MB, ...

更新了一些ORCA5的测试。

1236

帖子

1

威望

3495

eV
积分
4751

Level 6 (一方通行)

12#
发表于 Post on 2021-11-20 11:43:19 | 只看该作者 Only view this author
本帖最后由 biogon 于 2021-11-20 11:49 编辑

趁7502机器有空随便跑了一波分,单路@3.1G平均52s,双路@3.02G平均36s,应该是本坛最快记录了,后期试试通过拉高功耗墙看能不能得到快的速度,以及现在用的内核4.18的cent os,后面试试换5.x内核的系统,据说速度更快

1236

帖子

1

威望

3495

eV
积分
4751

Level 6 (一方通行)

13#
发表于 Post on 2021-11-20 11:45:38 | 只看该作者 Only view this author
本帖最后由 biogon 于 2021-11-20 11:48 编辑
paramecium86 发表于 2021-11-19 20:24
这可能说明之前从E5时代到2代 Scalable 一直都是14nm, 这牙膏真是没多少可以挤。。。

确实是挤牙膏,我在12楼更新了随便用罗马测的速度

125

帖子

0

威望

2168

eV
积分
2293

Level 5 (御坂)

14#
发表于 Post on 2021-11-20 13:06:01 | 只看该作者 Only view this author
paramecium86 发表于 2021-11-20 10:54
更新了一些ORCA5的测试。

非常详细的测试!看起来就ORCA5而言8大+8小和8大+4小差别不算大,8+4比8大核有明显的加速,比5900x开12核也快不少,应该是大核算完后把小核的任务转交给大核去算了。
另外开8大8小时默认功耗怎么样?250w还是太恐怖了

320

帖子

1

威望

5357

eV
积分
5697

Level 6 (一方通行)

15#
 楼主 Author| 发表于 Post on 2021-11-20 16:18:10 | 只看该作者 Only view this author
本帖最后由 paramecium86 于 2021-11-20 16:19 编辑
ahxb 发表于 2021-11-20 13:06
非常详细的测试!看起来就ORCA5而言8大+8小和8大+4小差别不算大,8+4比8大核有明显的加速,比5900x开12核 ...

8大8小并没有比8大8小并开启超线程省很多。基本是一样的功耗。大概是平均250W+ 瞬时有时候飙到270W。(默认全开是瞬时可以到300W这种数的)我想这个巨量的功耗来自于华硕的AI自动超频。全程我看大核心频率一直是5.0-5.1GHz 频率,大小核都能到100度左右 然后就撞温度墙了。  我用的360水冷压不住这U了。用默认频率功耗会好得多。不过速度上要慢个大概10%左右。

本版积分规则 Credits rule

手机版 Mobile version|北京科音自然科学研究中心 Beijing Kein Research Center for Natural Sciences|京公网安备 11010502035419号|计算化学公社 — 北京科音旗下高水平计算化学交流论坛 ( 京ICP备14038949号-1 )|网站地图

GMT+8, 2024-11-23 11:45 , Processed in 0.209029 second(s), 30 queries , Gzip On.

快速回复 返回顶部 返回列表 Return to list