计算化学公社

 找回密码 Forget password
 注册 Register
Views: 4556|回复 Reply: 4
打印 Print 上一主题 Last thread 下一主题 Next thread

[集群维护] 请问rocks集群主节点与子节点硬盘关系

[复制链接 Copy URL]

299

帖子

0

威望

1924

eV
积分
2223

Level 5 (御坂)

跳转到指定楼层 Go to specific reply
楼主
个人管理一个小集群,用作gausiian计算
安装的rocks系统
使用很方便,但是一个小问题

rocks主节点与子节点硬盘自动同步,但是子节点的数据是不是都通过网络写在主节点上的硬盘?这样多个节点同时计算那主节点岂不负担很大?
如果配置机器,是不是子节点硬盘必须跟主节点一样?  

谢谢!

216

帖子

3

威望

4470

eV
积分
4746

Level 6 (一方通行)

2#
发表于 Post on 2016-12-23 09:24:42 | 只看该作者 Only view this author
以前想弄rocks但是没弄成,后来直接用的centos,确实是通过网络读写主节点的硬盘,但是你可以写高斯脚本时将临时文件的储存位置写在计算节点的硬盘上,该硬盘的大小视你所需计算任务的需要决定,这样最主要的读写文件都不会写入主节点目录,这样主节点的负担就减小很多。

评分 Rate

参与人数
Participants 1
eV +1 收起 理由
Reason
sobereva + 1

查看全部评分 View all ratings

Monte Carlo

50

帖子

0

威望

1491

eV
积分
1542

Level 5 (御坂)

3#
发表于 Post on 2016-12-23 10:26:34 | 只看该作者 Only view this author
rocks 是用 NFS 挂载主节点的硬盘到子节点上。
如果子节点IO操作频繁,会影响性能,不光是主节点负担大,网络也会受影响。
1. IO频繁的作业在/dev/shm下运行
2. 升级网络

903

帖子

37

威望

5324

eV
积分
6967

Level 6 (一方通行)

4#
发表于 Post on 2016-12-23 10:38:05 | 只看该作者 Only view this author
本帖最后由 ggdh 于 2016-12-23 10:39 编辑

子节点/home用nfs 挂载主节点的/home 目录,其他的目录用子节点自己的硬盘
然后把gaussian 的 scratch dir 设置到/tmp 目录。这样gaussian的io量大的临时文件写在本地硬盘。io量小的chk和out文件写在主节点硬盘。
如果你不需要跨节点并行。这样算是没有问题的。

评分 Rate

参与人数
Participants 1
eV +1 收起 理由
Reason
sobereva + 1

查看全部评分 View all ratings

299

帖子

0

威望

1924

eV
积分
2223

Level 5 (御坂)

5#
 楼主 Author| 发表于 Post on 2016-12-23 19:52:16 | 只看该作者 Only view this author
谢谢!

本版积分规则 Credits rule

手机版 Mobile version|北京科音自然科学研究中心 Beijing Kein Research Center for Natural Sciences|京公网安备 11010502035419号|计算化学公社 — 北京科音旗下高水平计算化学交流论坛 ( 京ICP备14038949号-1 )|网站地图

GMT+8, 2024-11-27 08:59 , Processed in 0.356507 second(s), 22 queries , Gzip On.

快速回复 返回顶部 返回列表 Return to list