本帖最后由 abin 于 2022-5-26 11:11 编辑 楼上各位的讨论已经很全面了.... 稍微总结一下. RAID阵列, 是以高性价比的方案, 获得大存储空间的方案, 同时兼顾高可用性. 注意, 不是高可靠性. 鉴于实际场景中, 能耗费时间自己选用配件来组装服务器的课题组, 一般没有经济能力, 同时也不屑于找专业运维IT技术支持. 那么, 最能接受的方案是, 如果空间需求一个盘能解决, 多几个相互独立的硬盘, 一个放数据, 一个放备份, 再来一个放其他机器做备份. 备份也简单, rsync 或者borg, 都能处理. 抄写个脚本, 用10分钟, 修改一下路径即可. 我想, 直接操作物理硬盘, 是大多数小伙伴能理解, 能接受的处理方案. 无论是浪潮, 曙光, 联想, 都说对阵列做质保. 但是质保仅仅限于在质保期内, 上门或者寄送更换硬盘; 数据重建, 以及数据是否能恢复, 这不在保修范围内. |
Entropy.S.I 发表于 2022-5-25 21:36 我们只有一台安装了raid5,剩下的全部都是raid1,感觉更浪费了。。。 |
本帖最后由 Entropy.S.I 于 2022-5-25 21:40 编辑 ymeng 发表于 2022-5-25 21:29 计算节点不要拿大容量HDD搞RAID5。 如果是正宗的“集群”,计算节点应该没有大容量HDD,只有用于缓存的高速SSD,然后用NAS或SAN存长期数据。NAS或SAN上也不应该用一堆大容量盘组1个RAID5阵列。 如果真的在乎数据安全,应该搞定时冷备份,不能指望阵列的那点冗余机制能带来多高的安全性,阵列主要是为了保证高可用,而非数据安全。 |
abin 发表于 2022-5-25 20:57 您好,请问是都不建议做raid吗,我们实验室也是刚做完集群,每个服务器卖家的工程师都是给我们做的raid5,她说这样数据可以备份。。。我是服务器小白啊完全不懂,都是听工程师的。 |
怎么说呢, 用大容量硬盘来组建RAID阵列, 要么傻, 要么坏. 数据重建成功的几率, 很低. 还不如买大容量硬盘, 直接裸盘使用, 结合borg或者rsync自动备份. 我仔细看了下 5万多的机器, 似乎没有GPU, 居然还这么贵? 那么, 是戴尔卖给你的嘛? 也不对, 如果是戴尔出的货, 肯定不是5万了. 不同规格的机器, 可以组建为集群. 当然这种集群, 不能做多节点并行, 因为CPU规格不同. 但是做单节点并行没有问题. 唯一的问题是, 用户需要清楚处理器个数.... 好处就是, 不用来回找数据找机器. 我有个方便的工具, 可以无痛组建集群, 如有兴致, 查询签名信息了解. |
Entropy.S.I 发表于 2022-5-25 18:51 感谢! |
本帖最后由 Entropy.S.I 于 2022-5-25 18:57 编辑 不考虑图中卖家给的价格,图一还算正常,图二不合理,1代EPYC一言难尽。8块8T也属实奇葩,为何不专门装一台NAS… 而且8块8T组RAID5,阵列重建时间会让你发疯,还有很大概率重建失败,数据全寄。 可以按我说的“双路RTX3090、NVLink、双路8375C”去配一套,价格肯定不会超过图中这2套,性能是2倍以上。不知道你们用的程序是什么、跑多大模型,但这样的配置应对大部分任务都是顶级的性能。具体配置单,就在社长配置推荐博文的第5节配置基础上加2块3090、1个NVLink、若干18TB HDD,再把电源换成振华2000W就行了。配置推荐上次更新时间是今年1月,现在硬件价格降了很多,比如8375C现在只要8000左右,3090顶级非公(七彩虹火神、水神)目前JD自营只要10000零一点。此外,18TB硬盘去桃饱北京硬盘之家,1798拿下(最好早点拿下,根据老板说法,现在RMB贬值幅度大,硬盘马上就要涨了)。 |
Entropy.S.I 发表于 2022-5-25 17:31 ![]() |
KiritsuguPapa 发表于 2022-5-25 17:35 ![]() |
哪个商家这么坑 发出来大家避避雷![]() |
双路RTX3090,NVLink,双路8375C。5w出头基本解决。 图中配置纯纯的抢钱。 配置不同的机器就不要想着组集群了。更何况1950X和1代EPYC一样,在如今几乎是电子垃圾 |
另外课题组原本有一台线程撕裂者工作站平台,1950X 16核心32线程,128G内存,想配新的服务器后在保留未来集群可拓展性的同时将两台组一个集群,不知是否可行,以及是否需要购买交换机呢? 谢谢各位老师 |
手机版 Mobile version|北京科音自然科学研究中心 Beijing Kein Research Center for Natural Sciences|京公网安备 11010502035419号|计算化学公社 — 北京科音旗下高水平计算化学交流论坛 ( 京ICP备14038949号-1 )|网站地图
GMT+8, 2025-8-12 22:43 , Processed in 0.239553 second(s), 25 queries , Gzip On.