高强度I/O的应用对并行存储系统的挑战和解决方法研究

发布时间：2021-08-08 02:21

　　具有高I/O密集特性的高性能计算应用对高性能计算机存储系统综合性能的要求越来越高.以石油地震勘探数据处理为代表的一类重要应用表现出I/O数据量巨大、I/O访问密度大,对单个磁盘阵列存储部件的读写带宽要求高的特征.在Lustre文件系统中,充当对象存储服务功能的磁盘阵列设备输出带宽的不足将成为阻碍存储系统整体性能发挥的重要因素.针对此类问题,提出了一种缓存管理方法,分别在客户端添加VDISK模块,在OST端添加Cache模块,二者协同提高并行文件系统I/O的输出带宽的使用效率;另外,充分利用客户端空闲内存以及客户端之间的通信带宽,降低应用程序对磁盘阵列设备输出带宽的要求.通过大规模并行模型的验证表明,VDISK提高了实际可用的输出带宽,提高了外部存储系统的I/O效率. 

【文章来源】：计算机研究与发展. 2012,49(S1)北大核心EICSCD

【文章页数】：6 页

【参考文献】：
期刊论文
[1]基于分级Cache的透明计算系统[J]. 谭成辉,杨磊,文建国,李肯立.  计算机工程. 2011(05)



本文编号：3329015