计算化学公社

 找回密码 Forget password
 注册 Register
Views: 1881|回复 Reply: 2
打印 Print 上一主题 Last thread 下一主题 Next thread

[其它] 服务器寄放数据中心简介与注意事项

[复制链接 Copy URL]

187

帖子

1

威望

1245

eV
积分
1452

Level 4 (黑子)

本帖最后由 WaterMirror 于 2022-7-3 12:44 编辑

**本内容不得以任何形式商用,转载请注明卢老师思想家公社原贴**

  
实际科研中,使用靠谱像样的服务器对于工作者而言非常重要。但对于非纯计算的课题组,或者实验室仅由1-2个人负责计算,其他人都负责实验的课题组,如何妥善的安置所购买的服务器也是一个令人头疼的问题。目前大部分学校的空间资源都非常紧张,除非是大佬,否则想搞到专门放机器的空间其实非常困难。对于台数不多的,价格相对不高的服务器,可以在实验室休息间找个地方放;有的学校是可以提供专门的服务器托管机房的,有专人管理,而且就在自己学校,价格也会相对低廉,那么这种是非常推荐的;但是如果学校完全没有地方,且台数比较多了,尤其是塔式服务器,那实验室休息间也很难放下,那么如果有多余空闲的,不住人的房子,可以尝试放在家里的空调房里;或者有的老师就会去租房子,专门放服务器了;服务器一般是比较耐用的,所以如果服务器发热不是非常厉害,配置也并非说比较高端,没有让你有舍不得的情绪,那么直接放休息区或者家里都是比较可行的。但是如果你的机器发热非常恐怖,比如8375C,你也舍不得就把它扔在实验室休息区,那么将其寄放在互联网数据中心(Internet Data Center, IDC)或许也是一种选择。目前论坛上关于数据中心的介绍相对较少,本人最近刚刚将几台83系列的设备移入数据中心,实地考察与了解了一些,故斗胆在此做一个简单的介绍与一些个人的建议。在本介绍中不会出现任何数据中心具体的名字与地址。注意,选择数据中心的话价格成本肯定是会高的(在最后会附有目前的数据中心大概的价格),但是胜在服务完善,环境优良,基本不用自己再烦了,所以根据自己的实际情况进行慎重考虑,其实能住进数据中心的服务器是非常非常少的。或者说,这虽然是一个环境最优也是比较省事的方案,但是综合性价比等各个方面,往往是个性价比比较低的方案。而且大部分计算组都不会遇到这个问题,只有像本人这种在实验组专门负责计算的情况,且坑爹学校连个放服务器的地方都没有的情况,才要自己操心。本人水平实在有限,如果本文写的哪里不完善甚至有错误,请各位老师批评指正。

1 哪里可以寄放服务器
  如前所说,实验室休息区,学校超算中心或者家中,或者租房子,都是解决服务器放在哪里的好方法。对于少量,配置相对一般的服务器,实验室休息区可以直接白嫖。如果学校的超算中心可以提供寄放服务,那么我认为这是最优的选择。首先你的服务器处在一个相对较好的环境中,有专业的人管理;其次完全可以使用校园网,那么就完全避免了黑客的问题;你的机器离你也非常近,各方面处理起来都很方便。一些商业超算中心,也会提供服务器托管的服务,但是据说是要买超算中心提供的整机,才可以选择究竟是寄送,还是直接托管到超算中心。这个时候需要考虑超算中心服务器整机的配置是否合理(比如内存条是否插满),整机的价格是否合适,超算中心的寄放环境与价格是否合适。找寄放服务器的地方最好是需要实地考察环境,让销售与技术把你带到他们预分配给你的机房甚至机架考察,如果当地没有超算中心,那么可以网上开个腾讯会议参观,但是肯定是不如自己实地考察要好。在淘宝或者咸鱼上可以找到一些机房,这些机房往往价格非常便宜,但是实在是不太推荐。放这种机房还不如就白嫖实验室休息区,搞不好这些机房连人带你的机器直接跑路。风险实在太大。另外就是选择数据中心了。目前内蒙古在建设很多的数据中心,内蒙古的电费和管理费用也会相对便宜,可以有效降低成本。但是我们大部分人都至少希望服务器和自己在一个城市甚至一个行政区,那么内蒙古的数据中心虽然看起来很香,那么也不太合适了。不过现在很多超算中心将集群放在内蒙古,降低了超算机时的价格。

2 数据中心的分级与优势
  数据中心的分级有多套,一般我们关注的是美国标准Uptime Tier(将数据中心分为T1,T2,T3,T4,T5五个等级)与国标GB50174(将数据中心分为A,B,C三个等级),主要考察的都是数据中心的可用性、稳定性和安全性。目前美国UptimeTier标准是最权威的标准。先介绍这一标准。

2.1.1 最低级级别T1
  是一个单回路系统,只有计算机配电和冷却系统,且一般没有UPS或发电机组。一般没有任何的冗余设备。每年的
宕机时间最多30小时左右。但是注意,T1级别的数据中心也是数据中心,别人好歹是评上等级的,和随便找的机房(无等级)也是完全不同的,这个应该算是质变。且每年30小时的宕机时间对于一般的计算服务器而言绝对是不算多的,且一般绝不会在工作时间宕机。如果宕机时间超过了30小时,将进行分级的赔偿。别人该有的制冷,电路全部都是配套完全的。价格在数据中心里面是最低的。我个人虽然没有考察过T1级别的数据中心,北京咨询了几家一般也比较少有T1的了,但是个人认为如果数据中心正规,合同完备,实地考察也没有问题,T1级别其实应该完全够用了,甚至可以认为T1级别的数据中心不会差于大部分计算组自己建设的机房。(纯粹个人想法)

2.1.2 T2
  
从T2级别开始,就有组件的冗余了。比如当供电设备需要维修的时候,可以直接切换到另一个供电设备,保证机器是不断电的。一般没有任何的冗余设备。冗余组件一般是电源和冷却设备,具有UPS模块等等。但是备用的设备不是整套的。每年的宕机时间最多25小时左右。T1而言不算质变,所以个人认为T2对于量化服务器没有啥意义,不如省点钱用T1或者加点钱用T3。(纯粹个人想法)

2.1.3 T3
  T3
级别的数据中心应该是目前最多的数据中心了。本人找到数据中心也是T3级别的。本人水平有限,用那么高档的服务器,还让高档的服务器住那么好,实在是非常的惭愧,感觉自己实在不配。T3级别的数据中心具有完全冗余的系统,每年宕机时间最多2小时。这个已经是绰绰有余了。本人考察了不少T3级别的数据中心,里面有不少大银行的金融专用服务器。还是比较令人放心的。接下来的描述是我考察T3机房的亲眼所见(机房里面不给拍照),不知道T1,T2的什么环境: 有专门的保安,没有第一道门禁卡是不让进的,整个楼都有监控,有专门的监控室,机房配有第二道门禁卡,就是能进大楼的人不一定能进某个机房。任何人不能带食品,饮料进大楼,甚至大部分人都不能带电脑,手机进入,门口有专门的安检,估计是防止进入传播病毒。大楼里面基本看不到人。机房也是有无死角监控的。机柜是放在房间内的玻璃室中,就是进入房间之后还要专门进一道玻璃门才能摸到机架。空调和平时的家用空调也不同,制冷有两种,一个是对机器出风口有一个制冷,另一个是每一个机房下一层会配一个制冷,让冷气从下向上上来,据说是制冷效果更均匀,更好。据说冷气也是经过除尘处理的。监控是24小时监控室都有人在,每天有一次检查和一次打扫卫生。每次进机房都至少保证2个人,一个人开机房门并且监督,一个人去做事。反正我觉得已经非常正规,非常震撼了。个人觉得T3级别已经完全够用了,甚至已经有点浪费了。

2.1.4 T4
  T4
级别也称为容错系统,能满T1到T3加起来还多的环境设备和一切设备的备份设施。至少会有4天时间的断电保护,每年宕机时间最多半小时。据说亚马逊的大部分自建机房都是T4级别,如此好的环境保证其定制CPU8375C的正常工作。

2.1.5 T5
  这个好像是最新出来的,比较变态了。要求使用可再生能源,而且外界没有水T5级别要求可以永久正常运行。没有必要也是必然住不起的。

2.2.1
国标C级
  国标的最低级别。且没有相应的准确性的描述。(不像T1级别也是有很准确性描述的)。被称为基本型。只要机器能正常运行,制冷正常不超过28度,应该就算C级了。如果和Tier等级对比,应该算国标C级对应于T1级别与连T1级别都不算的部分机房。所以一个机房只说自己是国标C级,很可能是没有那么靠谱。

2.2.2
国标B级
  被称为冗余型。要求数据中心应该具有一定的备用设施。官方认为电子信息系统运行中断将造成一定的社会秩序混乱和一定的经济损失的机房应该不低于B级。比如高校,疾控中心,体育中心,省级机关单位等。个人觉得应该对应于Tier标准中的T2级别与部分T3级别,因为T3中有不少机房的国标认证达到了A级。也有不少T3级别的数据中心其实是T3+级别的数据中心,T3+级别的数据中心国标基本都能达到A级。本人最后选定的数据中心就是T3+级别与国标A级的。

2.2.2
国标A级
  被称为容错型。官方认为电子信息系统运行中断将造成重大的经济损或公共场所秩序严重混乱的必须达到A级。比如军队,银行总行,国家气象台等。对应于Tier标准中的部分T3级别与T4级别。T5级别如果算做国标的话,可能要算国标S级。

3 关于T3数据中心的一些内部差异
  由于目前大部分都是T3级别的数据中心,本人实地考察的也基本都是T3级别的数据中心,看的比较多,有了对比,所以有一些踩雷的点还是想分享一下。

3.1 关于写字楼中的T3机房与园区中的T3机房
  本人实地考察中遇到两类数据中心,都是T3级别,都能出具T3级别的证书。但是一类在写字楼中。一个6层的楼,只有3楼的部分和4楼的部分是他们改建的机房,过了T3级别。3楼和4楼的其他地方是其他公司。一楼都是吃饭的地方。其他楼层又是其他的公司。而对比的是那些在园区内的机房,可能只有3-4楼,一楼是办公室,放发电机,制冷,监控室,物资室等等,234楼全部都是机房。孰优孰劣,一目了然。而且这两类的价格居然差不多。新手千万不要被坑了。肯定是选园区的更加靠谱。

3.2 关于园区是否自建
  在选择园区内的数据中心的基础上,可能还会遇到园区是否自建的问题。有的数据中心的园区是自己建造,自己运营,招商管理的。而有的数据中心,他的园区是花钱请专门的基础设施建设公司建设完成后,他们再接手管理的。我个人认为如果自建园区也是比较正规的话,两者没啥区别。本人选择的是花钱请专门的基础设施建设公司建设的数据中心A。另一家数据中心B我考察了也不错,是备选的,他们家就是自建的。我问数据中心A数据中心B怎么样,AB很不错,是可以和他们形成竞争力的。我又问了BA怎么样,B就一直在说他们的园区是自己自建的,员工也都是住在园区内。所以这种自建的可能会有一些好处。但是实地考察完我还是觉得A环境服务略微更好一些。所以个人认为基本上就是没啥差别。这一指标或许不能说明很多问题。

3.3 关于是否是T3+ A
  这个问题之前也说过了,T3+ A级肯定算是T3里面的顶尖了。可是有些不是T3+A级的普通T3数据中心的报价会和T3+A级的相似,那明显是坑了。他们就会欺负新手不懂,只宣传都是T3,其实T3里面应该还是有差异的。

4 关于是散U租用还是整机柜租用
  
这个要根据你的机器的多少来。一般5台以下的散U租用还是比较划算的。但是多了那肯定还是整机柜划算。不过一般人可能也不会有多于5台的8375C这种级别的机器。土豪除外。

5. 关于T3+ A级别数据中心的价格
  报价大概是2U的机位费5500/年,还要加上带宽的费用。其实绝对是不便宜的。
  交换机如果机器不超过8台,那么使用桌面式交换机,放在机器上面可以节约1U的机位费用。但是如果机器很多,交换机大了,那这个交换机的机位费肯定是省不了了。当然,前面已经说过了,一般只有配置比较高的,你自己觉得心疼的好机器,才会放数据中心。你如果有钱买>8台的8375C,首先这个时候往往就是整机柜租用了,其次你肯定也不会在乎这种小钱了。所以对于一般人,这个交换机的费用总是可以省的。

6. 关于合同
  合同一定要仔细看,充分保障自己的权益。尤其可以在合同中附录你的配置单,作为凭证。上架交接时,也可以让他们给你盖有公章的收据。毕竟放数据中心的服务器配置肯定不会低。肯定是你自己的主力,法律这方面的事情,自己一定要上心。虽然正规的数据中心肯定不会出啥问题就是,但是毕竟是一份保障。

  本文的适用范围可能较窄,也是自己这次经历的一个总结。或许会有同样的同学,需要这一份经历的经验,将之总结在这里。
  本人水平有限,如果哪里写的不恰当甚至有错误,希望各位老师批评指正。


**本内容不得以任何形式商用,转载请注明卢老师思想家公社原贴**



评分 Rate

参与人数
Participants 4
威望 +1 eV +15 收起 理由
Reason
Picardo + 5 谢谢
dlldwtz + 5 不明觉厉
丁越 + 5 赞!
sobereva + 1 精品内容

查看全部评分 View all ratings

计算小白 水平很菜
随时可喷 万望指点

481

帖子

3

威望

5672

eV
积分
6213

Level 6 (一方通行)

2#
发表于 Post on 2022-7-4 10:48:01 | 只看该作者 Only view this author
我问个小白问题啊,这里提到的价格是包含电费的价格吗?如果包含,会针对不同的机器能耗进行区别定价吗?
恍惚月余,深谙人与人之间的差距。以后还应努力学习,才能与强者比肩。

187

帖子

1

威望

1245

eV
积分
1452

Level 4 (黑子)

3#
 楼主 Author| 发表于 Post on 2022-7-4 11:35:00 | 只看该作者 Only view this author
本帖最后由 WaterMirror 于 2022-7-4 11:54 编辑
ABetaCarw 发表于 2022-7-4 10:48
我问个小白问题啊,这里提到的价格是包含电费的价格吗?如果包含,会针对不同的机器能耗进行区别定价吗?

哦哦 对.这也是一个很关键的问题。忘了说,插个楼说一下:
这个首先要分度数的问题还是功率的问题。

度数的问题基本上是因数据中心不同而异的。
对于度数,如果是整个机柜租用,有的数据中心,记作数据中心A,A那里电费就已经完全Cover了,不管用多少电,价格就是整个机柜租用的价格X,不会再有额外的电费一项了,机器开着跑30天和跑1天收费是一样的。有的数据中心B,谈好了整个机柜的租用价格之后,对电是有限制的。交的机位费Y仅仅是包含这个机柜与N度电。如果使用超过了N度电,需要额外付钱。但是有趣的是,数据中心A的X并不总是大于Y。至少本人选择的,X和Y价格是一样的。所以建议应该把这点问清楚,选择一个全包的。
散U问的情况类似,也是有的数据中心机位费就全包了,有的超过限度还需要额外付款。而且前者的机位费也不一定大于后者的。

但是功率的问题不一样。

但是无论对于散U还是整机柜,每个机柜的功率数据中心建造的时候就已经定了。有时候会出现这个机柜可以放10个机器。但是你的功率特别大,放5个机器,这个机柜功率就已经满了。那么这个机柜就放不了别的机器了.....这种情况,即便你的机柜空间上没有放满,也要按照整机柜收费。因为这个机柜的空间别人放不了别的机器了。这个基本所有数据中心是统一的。


评分 Rate

参与人数
Participants 2
eV +6 收起 理由
Reason
404039756 + 1 谢谢
Picardo + 5 谢谢

查看全部评分 View all ratings

计算小白 水平很菜
随时可喷 万望指点

本版积分规则 Credits rule

手机版 Mobile version|北京科音自然科学研究中心 Beijing Kein Research Center for Natural Sciences|京公网安备 11010502035419号|计算化学公社 — 北京科音旗下高水平计算化学交流论坛 ( 京ICP备14038949号-1 )|网站地图

GMT+8, 2024-11-23 19:14 , Processed in 0.219425 second(s), 22 queries , Gzip On.

快速回复 返回顶部 返回列表 Return to list