计算化学公社
标题: 请教小规模服务器集群的准系统、cpu、网络等应该如何配置 [打印本页]
作者Author: mgqqlwq 时间: 2019-10-29 15:48
标题: 请教小规模服务器集群的准系统、cpu、网络等应该如何配置
本帖最后由 mgqqlwq 于 2019-10-29 16:00 编辑
最近跟老板申请购买计算服务器，老板让我们先调研。我们之前有一个18核的机架式和机架，所以我们初步打算再买两到三台机器组建一个小的集群，当然最后还要考虑价格和老板支持的力度。
之前不懂服务器，看了卢老师关于配置机器的帖子，学到非常非常多，也发现我们之前那台机器估计被坑惨了。因为我们想组小集群，配置上有些地方和组单机似乎不一样，心里没底，所以想跟大家请教下集群配置方面的问题。
1. 我目前主要用的软件是LAMMPS，组里还有其他人用有限元和蒙特卡洛方面的软件，论坛上讨论配机的似乎涉及到Gromacs多一些，请问LAMMPS的话GPU加速的效果怎样呢？因为有限元和蒙特卡洛方面的应该用不到GPU，我们目前考虑还是优先CPU，再酌情增加GPU，这样考虑是否合理呢？
2. 准系统目前有个商家推荐的是超微的7049A-T，淘宝上能查到的非常少，淘宝上超微能找到的还有7049GP-TRT和其他型号的准系统，似乎型号也不少，请问如果用6系或者8系CPU的话选择超微哪款准系统好一些？另外准系统是建议选择超微的还是Dell R740之类的呢？或者应该像卢老师帖子里那样主板机箱单卖组装更好一些？但我们想要放在机架上，还是需要找机架式的那种。
3. CPU目前一个商家推荐的是6148的CPU，价格8000多，8173M价格12000-13000的话和6148选那个更合适一些？还有其他商家推荐6230、6248和8260等，请问下6系和8系CPU选择那个型号好一些？在网上两两比较CPU参数感觉都差不多，确实有些看不懂。CPU是不是还是应该选卢老师推荐的8173M？
4. 另外CPU 基准频率（Base Frequency）和睿频（Turbo Frequency）选择时到底应该参考那个选择？做计算的时候一般CPU是运行在那个频率上？对这块有点傻傻分不清。
5. 内存选择12*16GB是为了把通道填满，发挥CPU最大的性能是吗？
6. 请问组集群就一定需要用IB交换机和网卡对吧，必须要那种100G的吗？这个价格比较贵，还有个商家推荐OPA的卡和交换机，对这块自己了解就更少了，请问下大家应该怎么考虑网络的部分。
7. 如果网路部分太贵，导致费用太高，我们准系统选择四路CPU的机器推荐吗？四路CPU的和两路的比有什么优缺点呢？论坛上好像没有推荐4路的，是因为性价比太低了吗？
另外求教一下大家，zf采购网的价格都好贵，怎样才能规避这个天坑呢？tb性价比高怎样才能买到呢？单位这块不好过关。
问题有点多，还请大家不吝赐教多多帮助。如果有其他没有考虑到的问题，也欢迎多多指点。
先谢过大家了！
作者Author: sobereva 时间: 2019-10-30 03:48
2 你没弄懂什么叫准系统。那些为了让机子尺寸较小（如ITX规格），往往以牺牲性能为代价的才属于准系统，而你要买的是服务器，绝对不是准系统。
就用我博文里推荐的配置就完了，不要想多。
3 6418和8173M差异非常显著，一个20核一个28核。你追求性能显然优先考虑8173M。现在8173M明显没有那么贵，你去淘宝搜，一万块钱轻易就能买到，性价比明显比6148划算。
4 看满载时候的TB频率。卖服务器CPU的页面里往往会明说
5 是
6 你如果不跨节点并行，千兆网就够
7 四路性价比非常低，关键是主板贼贵，组装服务器的卖四路的非常少
作者Author: mgqqlwq 时间: 2019-10-30 11:34
非常感谢卢老师的回复！还有几个问题想再跟您请教下
1. 因为我们想将机器放在机架上，您推荐的先马泰坦的机箱可以当做机架式的来用吗？
2. 不推荐超微7049A-T是因为性价比不够高吗？我表述为准系统不准确，谢谢您的更正。
3. 请问下像超微7049A-T这种现成的服务器，质量怎么样呢？供应商那里大多是超微这种，散件自己攒的话需要tb的商家我们可能无法报销
4. 我查到8173M基础频率是2.0 GHz，而Turbo Speed是3.5 GHz，做计算的时候cpu满载运行的时，8173M应该是运行在3.5 GHz这个频率上是吗？没完全理解，想再跟您确认下
先谢谢卢老师了！还请您多多指点
作者Author: sobereva 时间: 2019-10-31 06:03
1 泰坦那个机箱比较宽，本身设计就是立着放的。7049A-T的机箱是标准4U宽度（17.8cm），如果你的机架是4U的，可以横过来放。
2 太小众。而且性价比也不如散件组的，诸如其标配的1200W电源明显浪费（除非塞倆高端GPU）
3 7049A-T不是现成的服务器，而是超微配好了机箱、风扇、电源（1200W）、主板（X11DAi-N），用户可以根据需求选择CPU、内存、GPU、硬盘塞进去而已。质量肯定是没问题。
参看https://www.supermicro.com/products/system/4U/7049/SYS-7049A-T.cfm
4 3.5是最高TB频率（非所有核满载的情况），实际28核满载远达不到这个频率。8173M所有核满载TB频率是2.7
作者Author: mgqqlwq 时间: 2019-10-31 11:44
谢谢您的回复！不好意思，麻烦再咨询几个问题
1. 因为我们要放在机架上，可能还需要找机架式的这种机箱，自己攒机的话请问您有推荐的吗？
2. 7049A-T这种价格上确实比您推荐的攒机方案贵不少，不过我目前只找到超微几款，像7049A-T这种机箱+主板+风扇+电源的，超微的不是主流的产品吗？还有哪些类似的品牌可以选择呢？似乎Dell的要贵不少
3. CPU的满载频率我在intel官网上似乎没有找到，但是tb上有少数商家会写出来，请问满载频率准确的数据哪里可以找到呢？
作者Author: sobereva 时间: 2019-11-1 07:27
1 直接让卖服务器的给你配个合适的就行了
2 超微的是主流，如果你确实非得要7049A-T这种半成品，没必要考虑Dell的。Dell自己连主板都不制造
3 官网上不体现，那些数据有的是卖服务器U的人自己测的，http://www.cpu-world.com上也有一些数据
作者Author: mgqqlwq 时间: 2019-11-1 08:43
本帖最后由 mgqqlwq 于 2019-11-1 08:45 编辑
谢谢卢老师！就差找一个靠谱的商家了，然后还要想办法搞定zf采购
卢老师，昨天问了一个商家，cpu推荐8136，比8173M便宜3000块左右，说是满载频率差不多，您了解8136这块U吗？商家说的靠谱不？
作者Author: monoyu 时间: 2019-11-1 10:43
8136正式版很多报价6000左右，但貌似只能组单路，且需要特定的BIOS，匹配特定主板，故成为特价款。也是从商家了解的信息，不知确切与否，但便宜总有便宜的道理吧。
作者Author: mgqqlwq 时间: 2019-11-1 17:40
本帖最后由 mgqqlwq 于 2019-11-1 17:41 编辑
谢谢回复！
昨天商家说之前8136货很少，最近才出现比较多的货，所以之前可能出现的少。另外，他说满载频率差不多。双路应该可以吧，他组的就是双路的机器。
但是到底为啥便宜我也不懂，不知道是否靠谱，所以来请教大家和卢老师。
作者Author: qinzhong605 时间: 2019-11-1 18:40
能用，能双路，我现在用的就是这个CPU，从已有数据看，性能与8173应该差不多的，但是每个U能便宜3000，可以多配制一些机械盘和高端的显卡了！
作者Author: monoyu 时间: 2019-11-1 21:48
请问是配永擎的主板么？
作者Author: sobereva 时间: 2019-11-2 08:45
8136即便现在在淘宝上也很少见，价格也没比8173M便宜。
如果你问的那家8136确实便宜三千，可以考虑，但得说好了退换规则，免得之后出现不兼容之类的退换纠纷
作者Author: bobosiji 时间: 2019-11-2 15:48
8163这款CPU比8173如何？多谢sob老师~
作者Author: qinzhong605 时间: 2019-11-2 17:05
超微X11DAI-N，商家需要刷一下bios。
作者Author: sobereva 时间: 2019-11-3 07:47
少四个核
作者Author: bobosiji 时间: 2019-11-3 09:18
8163频率2.5G 比8173m高不少呢。按 频率*核数， 8163算力略强一些？
作者Author: sobereva 时间: 2019-11-4 09:46
看的是全核TB频率，基频频率没什么参考价值
作者Author: mgqqlwq 时间: 2019-11-4 14:31
谢谢回复！
您8136用了多久了？一直是正常使用的吗？
作者Author: mgqqlwq 时间: 2019-11-4 14:33
本帖最后由 mgqqlwq 于 2019-11-4 14:36 编辑
谢谢卢老师！
我之前问商家他说8136也是正式版，请问下您说的不兼容的情况是指什么样的情况呢？没有经验，这种U潜在的问题会是什么呢？
另外，卢老师，咱们论坛登陆是限制IP的吗？我遇到的情况是在办公室可以登陆，但是回到家用户名密码登陆不会报错但是点击后并不会登陆，这是为什么呢？
作者Author: sobereva 时间: 2019-11-5 08:36
有些不在Intel ARK里能查到的CPU挑主板
由于之前有些用户滥发垃圾广告，被封了IP。但你的情况未必是这个原因，封IP的话是连访问首页都没法访问。换个浏览器试试
作者Author: mgqqlwq 时间: 2019-11-5 08:58
卢老师，我从INTEL ARK上查询的话，8173M和8136都不在列表里面？
是不是说8173M也是一样的问题，但是使用的人多很多，所以出问题的可能性很小。8136之前很少有人用过，出问题的可能性就大一些？
作者Author: sobereva 时间: 2019-11-5 09:25
挑不挑主板，卖CPU的商家大多会注明
8173M这种型号不挑主板，和ARK上能查到的正式版完全一样
8136不能说“问题大”，用起来并不会有任何问题，只能说可能只兼容某些主板，或者一些主板需要刷BIOS才能支持。向卖家咨询即可。
作者Author: mgqqlwq 时间: 2019-11-13 18:06
谢谢卢老师！前几天论坛登陆不上来，回复晚了。
我们目前可能需要从大一点的厂家买，他们不能卖8136之类的U。
有个厂家推荐8270的cpu，但是最后价格和8173M差不多，但是我查8270应该贵很多才对。
想请教一下您，(1) 这种会不会有什么问题，不明白他便宜的原因是什么；(2) 8270的性能和8173M比怎么样呢？我看8270是26个核
作者Author: sobereva 时间: 2019-11-13 22:00
只要对方承诺不是工程版就行
作者Author: mgqqlwq 时间: 2019-11-14 16:38
好的，谢谢卢老师！
这么说的话8270性能还是比8173M好一些？
作者Author: sobereva 时间: 2019-11-15 00:30
半斤八两，看程序以及具体跑的任务的并行效率
作者Author: mgqqlwq 时间: 2019-11-15 08:47
我们目前主要跑分子动力学和有限元的计算，以后也许会跑第一性原理的一些计算。好像LAMMPS并行效率还挺好的，像我们这种情况选这两个都差不多是吧？
作者Author: sobereva 时间: 2019-11-16 13:10
是
作者Author: mgqqlwq 时间: 2019-11-17 23:29
明白了，非常非常感谢卢老师！
作者Author: xiaxue 时间: 2019-11-21 20:01
8136用超微的主板就可以，不过需要刷bios。
最近帮别人配了一台，刚到货，希望不要翻车。
作者Author: mgqqlwq 时间: 2019-11-22 17:19
8136您买的大概多少钱呢？
作者Author: xiaxue 时间: 2019-11-22 23:02
找的淘宝上的，直接给整机价格，应该是比6173低3000的样子。
作者Author: mgqqlwq 时间: 2019-11-23 08:32
了解了，谢谢分享！
| 欢迎光临 计算化学公社 (http://bbs.keinsci.com/) |
Powered by Discuz! X3.3 |