计算化学公社»论坛首页 › 理论与计算化学 (Theoretical and Computational Chemistry) › 量子化学 (Quantum Chemistry) › 疑惑：量子分块算CCSD，固态硬盘写入量特别大，但读取量 ...

疑惑：量子分块算CCSD，固态硬盘写入量特别大，但读取量几乎没有？

查看数: 1209 | 评论数: 12 | 收藏 Add to favorites 0

关灯 | 提示：支持键盘翻页<-左右->

帖子模式

王尔德

发布时间: 2023-3-17 15:04

正文摘要:

某师兄用Fortran写的量子分块程序（？）接在Gaussian上算CCSD（？），小白不太懂他具体怎么实现的，但看程序名是这样的。这条nvme 1t的固态才装上 56 天，期间只一直算他的程序，写入量就到了 1 PB ？？另外 ...

回复 Reply

niobium 发表于 Post on 2023-3-18 10:12:02

量子分块。。。好高大上的感觉

王尔德 发表于 Post on 2023-3-17 19:12:55

wjc404 发表于 2023-3-17 19:09
可以的，不过应该要等到所有任务都算完或杀掉后再操作。用Linux的tmpfs(请自行搜索相关操作方法)作为GAUSS_ ...

好的，我去查一下，谢谢老师

wjc404 发表于 Post on 2023-3-17 19:09:18

可以的，不过应该要等到所有任务都算完或杀掉后再操作。用Linux的tmpfs(请自行搜索相关操作方法)作为GAUSS_SCRDIR的位置，然后重新启任务。

王尔德 发表于 Post on 2023-3-17 19:03:36

本帖最后由王尔德于 2023-3-17 19:07 编辑

wjc404 发表于 2023-3-17 18:41
有可能是nvme驱动的问题，可以用两个方向的dd命令来测一下看smart报告的读数本身是否正常。

如果读数本 ...

非常感谢老师，应该就是这个原因！
smart读数是对的；
看了rwf文件大小，几乎时时刻刻都在重新生成，加起来有几十g（远小于500g的内存），基本上对的上 buff/cache 的数值，free的数值保持在 400+ g；
确实是高斯同时将rwf文件写入了内存、固态，但读取只读取内存的，导致固态读取量几乎没有。

不知道能不能只缓存到内存里
密度矩阵倒不太清楚，没跟我们介绍过他具体算什么

wjc404 发表于 Post on 2023-3-17 18:41:07

本帖最后由 wjc404 于 2023-3-17 19:02 编辑

有可能是nvme驱动的问题，可以用两个方向的dd命令来测一下看smart报告的读数本身是否正常。

如果读数本身没问题，则有可能是服务器的大内存缓存了Gaussian的rwf文件。如果服务器的可用内存明显多于Gaussian任务的rwf大小（后者可以在输出文件的结尾看到）（或者在Gaussian运行过程中通过free命令看发现虽然buffer/cached增加了大概rwf文件的大小但free那一栏一直都有很多），则基本上是操作系统将Gaussian的rwf缓存到了DRAM里面，这时读取可以完全不通过磁盘，但写入操作到磁盘只是受到了延迟而不是省略。
话说这平均200MB/s的写入，如果只是算能量不太会这么大，是不是涉及了算密度矩阵？

王尔德 发表于 Post on 2023-3-17 17:35:07