高通量仿真中数据存储与访问技术研究
本文选题:大数据 + 高通量仿真 ; 参考:《系统仿真学报》2017年09期
【摘要】:针对大数据环境下仿真应用的海量数据处理需求,参照面向大数据高通量计算的架构和技术特点,提出并定义了高通量仿真的概念和参考架构。针对高通量仿真中数据访问瓶颈问题,设计了基于分布式内存文件系统的高通量仿真数据存储和访问体系,并扩展集成了非易失性存储器进一步提高数据访问的吞吐量。通过对典型仿真应用的实验验证,表明采用分布式内存文件系统和非易失性存储器的高通量仿真存储系统能够有效提升高通量仿真数据存储与访问性能。
[Abstract]:According to the requirement of mass data processing for simulation applications under big data environment, the concept and reference architecture of high-throughput simulation are proposed and defined according to the architecture and technical characteristics of big data high-throughput computing. Aiming at the bottleneck of data access in high-throughput simulation, a high-throughput simulation data storage and access system based on distributed memory file system is designed, and the integrated non-volatile memory is extended to further improve the throughput of data access. The experimental results of typical simulation applications show that the distributed memory file system and the high throughput simulation storage system with non-volatile memory can effectively improve the performance of high-throughput simulation data storage and access.
【作者单位】: 北京理工大学计算机学院;北京仿真中心航天系统仿真重点实验室;
【基金】:国家自然科学基金(61602037)
【分类号】:TP333
【相似文献】
相关期刊论文 前10条
1 曲东才;光盘文件系统标准[J];电脑技术;2002年09期
2 程振东;栾钟治;孟由;李亮淑;和荣;杨婷婷;钱德沛;管刚;陈伟;;云文件系统中纠删码技术的研究与实现[J];计算机科学与探索;2013年04期
3 李舜莉,阮玉;迅速发展的大规模光盘文件系统[J];激光杂志;1988年05期
4 王江;;一种可靠高效的闪存文件系统[J];单片机与嵌入式系统应用;2013年12期
5 鲁智深;;Kingmax microSDHC 4GB存储卡评测[J];大众数码;2007年06期
6 钟忻,慕春棣;基于闪存的文件系统的实现[J];计算机工程与应用;2003年24期
7 刘明;张军平;;并行文件系统的应用探讨[J];软件;2010年11期
8 张在贵;张立强;李瑞东;文中领;张海涛;;一种适用于集群文件系统分级存储的分布式锁设计与分析[J];计算机研究与发展;2012年S1期
9 周恩强;董勇;张伟;卢宇彤;;对象存储并行文件系统小文件性能优化研究[J];计算机工程与科学;2013年12期
10 陈禹;;用户心中的误区[J];中国计算机用户;2007年10期
相关会议论文 前3条
1 王永瑞;熊剑平;;基于CF卡的特定FAT文件系统的软硬件设计与实现[A];2008中国仪器仪表与测控技术进展大会论文集(Ⅲ)[C];2008年
2 王雪娇;钱军;温东新;张展;崔忠强;;基于Linux虚拟文件系统故障注入器的设计与实现[A];第六届中国测试学术会议论文集[C];2010年
3 钱迎进;金士尧;肖侬;;大规模集群文件系统中的I/O拥塞控制机制[A];2010年第16届全国信息存储技术大会(IST2010)论文集[C];2010年
相关重要报纸文章 前10条
1 李柠 许冰;Linux的“心”事[N];中国计算机报;2000年
2 河北 廉育功;Linux技巧[N];中国电脑教育报;2001年
3 阳光;一台PC机上安装Win98、NT、Linux[N];中国矿业报;2000年
4 小雨;FAT享年25岁——触摸未来文件系统[N];电脑报;2003年
5 北京捷华润公司 郝常杰;对象存储:块和文件之外的存储形式[N];中国计算机报;2006年
6 门宣;走进Linux2.4的精彩世界[N];中国计算机报;2001年
7 ;驱动器与DOS兼容文件系统[N];电脑报;2002年
8 任勇;在Linux中访问DOS的方法[N];大众科技报;2000年
9 ;Veritas展示用于Oracle9i RAC的群集系统[N];计算机世界;2003年
10 赵宇明;建设完美的存储世界[N];网络世界;2008年
相关博士学位论文 前3条
1 陈杰;本地文件系统数据更新模式研究[D];华中科技大学;2014年
2 孙凝晖;可扩展I/O的研究和参考实现[D];中国科学院研究生院(计算技术研究所);1999年
3 钱迎进;大规模Lustre集群文件系统关键技术的研究[D];国防科学技术大学;2011年
相关硕士学位论文 前10条
1 刘佩;基于纠删码技术的HD_EC文件系统的设计与实现[D];曲阜师范大学;2015年
2 丘文未;基于软硬件协同设计的闪存存储系统关键技术研究与实现[D];国防科学技术大学;2013年
3 赖尚校;基于ARM的嵌入式闪存驱动与UBIFS文件系统的分析与实现[D];浙江工业大学;2014年
4 刘剑;用FPGA实现文件系统及其应用[D];太原理工大学;2013年
5 冯子陵;闪存文件系统UBIFS的分析与优化[D];南京大学;2013年
6 何耀;面向大容量SCM的融合式文件系统[D];江苏大学;2016年
7 房s,
本文编号:1836506
本文链接:https://www.wllwen.com/kejilunwen/jisuanjikexuelunwen/1836506.html