溯源感知存储系统中高效存储与检索溯源的方法研究
本文关键词:溯源感知存储系统中高效存储与检索溯源的方法研究 出处:《华中科技大学》2014年硕士论文 论文类型:学位论文
【摘要】:溯源感知存储系统是可以自动收集并管理对象溯源的存储系统,是存储系统的一种变革。它不仅存储对象(文件、进程、管道)本身,也可以维护对象的溯源。溯源是描述对象详细历史信息的一种元数据,它提升了数字信息的价值。然而,随着数字信息的爆炸式增长,存储系统对数字信息的管理面临着巨大的挑战。经统计,溯源是数字信息数据量的十倍以上,如何高效的存储并检索溯源是一个亟待解决的难题。 为了实现高效的存储并检索溯源,分析了溯源感知存储系统的工作原理并研究了溯源的类型及收集方法。研究发现溯源感知存储系统收集的是整个系统中所有文件、进程和管道的溯源。其中,没有对溯源感知存储系统卷上的文件产生影响的对象的溯源是没有利用价值的,并且没有利用价值的溯源是有利用价值的溯源的数倍。因此,对系统收集到的溯源进行了提取,消除没有利用价值的溯源,大大减少了溯源占用的存储空间。溯源是半结构化数据,研究了半结构化数据存储与检索技术,提出了用有向无环图表示溯源,分析了环检测和消除算法以及环避免算法在消除溯源图中的环性能上的差异。研究了溯源的存储格式,提出将与对象相关的溯源集中存储到一起的存储方式。提出了用图形数据库、伯克利数据库、文本文件存储和检索溯源的方法并从理论上分析了这三个解决方案性能上的差异,,设计与实现了用伯克利数据库和文本文件存储和检索溯源。 最后,在本地存储系统环境下测试了系统收集溯源的功能,分析了对溯源进行提取之后收集到的溯源的正确性,保证了有价值的溯源信息的完整性。测试了经提取之后的溯源占用的存储空间。然后分析了数据库和文本文件在存储、检索和更新溯源方面的性能。
[Abstract]:Traceability storage system is a storage system that can automatically collect and manage object traceability. It is a kind of change of storage system. It not only stores the object (file, process, pipeline) itself. Traceability can also be maintained. Traceability is a metadata that describes the detailed historical information of an object, which enhances the value of digital information. However, with the explosive growth of digital information. The management of digital information in storage system is facing a great challenge. According to statistics, traceability is more than ten times the amount of digital information. How to store and retrieve the digital information efficiently is a difficult problem to be solved. In order to achieve efficient storage and retrieval traceability. The working principle of traceability sensing storage system is analyzed, and the types and collection methods of traceability are studied. It is found that traceability storage system collects all files, processes and pipelines in the whole system. The traceability of objects that do not have an impact on traceability awareness of files on the volume of storage systems is of no value, and the traceability of unexploited values is several times greater than that of traceability of exploitable values. The traceability collected by the system is extracted to eliminate the traceability without using value and greatly reduce the storage space occupied by traceability. The traceability is semi-structured data. The technology of semi-structured data storage and retrieval is studied. The traceability is represented by directed acyclic graph, and the difference of loop detection and elimination algorithm and ring avoidance algorithm in eliminating the loop performance in traceability graph is analyzed, and the storage format of traceability is studied. This paper presents a storage method of centralized storage of traceability related to objects, and presents the use of graphic database, Berkeley database. The methods of text file storage and retrieval traceability are analyzed in theory. The author designs and implements the Berkeley database and text file storage and retrieval traceability. Finally, the function of system collection traceability is tested in the local storage system environment, and the correctness of traceability collected after traceability extraction is analyzed. The integrity of valuable traceability information is guaranteed. The storage space occupied by traceability after extraction is tested. Then the performance of database and text file in storage retrieval and update traceability is analyzed.
【学位授予单位】:华中科技大学
【学位级别】:硕士
【学位授予年份】:2014
【分类号】:TP333
【相似文献】
相关期刊论文 前10条
1 李红;蓝光存储系统 光盘容量高达23G[J];信息记录材料;2004年01期
2 ;存储系统 金融行业应用卓越奖 医疗行业应用卓越奖[J];每周电脑报;2004年20期
3 诺拉;EMC Symmetrix DMX-3存储系统 超大容量 高速存取[J];中国计算机用户;2005年31期
4 谢世诚;;浪潮推出4Gb光纤存储系统[J];微型机与应用;2006年07期
5 ;昆腾分级存储系统[J];软件世界;2009年11期
6 ;超低功耗云存储系统或被地方政府看好[J];中国有线电视;2013年08期
7 汤赫男;;云存储系统的分析与应用研究[J];计算机光盘软件与应用;2013年24期
8 谌伟;;云存储系统的分析与应用探讨[J];数字技术与应用;2013年10期
9 雅君;跟上企业的匆匆脚步——利用HP SureStoreEXP256构筑企业存储系统[J];中国计算机用户;2000年08期
10 贾莉;;Symmetrix8000实现19TB存储[J];每周电脑报;2000年18期
相关会议论文 前10条
1 赵志刚;;存储系统在企业信息化中的应用[A];2005年安徽通信论文集[C];2006年
2 黄晓峰;张杰;;矿井信息中心存储系统设计[A];安全高效矿井机电装备及信息化技术——陕西省煤炭学会学术年会论文集(2011)[C];2011年
3 孙哲;李昌银;;构建核电高可用云存储系统[A];2012电力行业信息化年会优秀论文专辑[C];2012年
4 焦超;周天彤;李祥学;李建华;;面向灾备的高性能可信存储系统设计[A];第十一届保密通信与信息安全现状研讨会论文集[C];2009年
5 汪位龙;;设计院存储系统建设初探[A];中国公路学会计算机应用分会2004年年会学术论文集[C];2004年
6 梅松竹;李宗伯;;Storage 7000系列混合存储系统分析[A];2009年中国高校通信类院系学术研讨会论文集[C];2009年
7 王克敏;张玺;胡江凯;王毅涛;;NWP资料归档方法及其存储系统的应用[A];中国气象学会2006年年会“中尺度天气动力学、数值模拟和预测”分会场论文集[C];2006年
8 孙哲;李昌银;;DeDu:基于云计算的冗余删除存储系统[A];电力行业新一代信息技术研讨会论文集[C];2011年
9 高小伍;党齐民;林晨;;校园网存储系统的研究与实现[A];中国高等教育学会教育信息化分会第十次学术年会论文集[C];2010年
10 宫海林;郭长国;苑洪亮;王怀民;;支持事务的非结构化数据聚合存储系统GSL[A];2006年全国开放式分布与并行计算机学术会议论文集(三)[C];2006年
相关重要报纸文章 前10条
1 ;第三季度中国存储系统市场达19.1亿元[N];中国高新技术产业导报;2005年
2 本报记者 薛斐;服务:存储系统的灵魂[N];计算机世界;2002年
3 单群一;惠普推出全新一体化存储系统[N];中国税务报;2007年
4 ;浪潮推出4Gb光纤存储系统[N];人民邮电;2006年
5 ;今年第二季度 存储系统市场价值达12.6亿元[N];人民邮电;2006年
6 郭;日立推出普及型存储系统[N];计算机世界;2007年
7 陈耀光;朗登 扛起存储系统设计院的大旗[N];中国企业报;2001年
8 ;富士通存储系统全面升级[N];网络世界;2009年
9 ;EMC亚洲生产制造中心落户深圳[N];网络世界;2009年
10 临履;存储系统有了“设计院”[N];网络世界;2001年
相关博士学位论文 前10条
1 赵雨虹;云存储系统资源调度技术研究[D];华中科技大学;2015年
2 陆承涛;存储系统性能管理问题的研究[D];华中科技大学;2010年
3 聂雪军;内容感知存储系统中信息信息生命周期管理关键技术研究[D];华中科技大学;2011年
4 罗东健;大规模存储系统高可靠性关键技术研究[D];华中科技大学;2011年
5 聂雪军;内容感知存储系统中信息生命周期管理关键技术研究[D];华中科技大学;2010年
6 王鹏;低密度奇偶校验码应用于存储系统的关键技术研究[D];华中科技大学;2013年
7 刁莹;用数学建模方法评价存储系统性能[D];哈尔滨工程大学;2013年
8 符青云;面向大规模流媒体服务的高性能存储系统研究[D];电子科技大学;2009年
9 王玉林;多节点容错存储系统的数据与缓存组织研究[D];电子科技大学;2010年
10 田敬;对等存储系统中的数据可用性与安全性研究[D];北京大学;2007年
相关硕士学位论文 前10条
1 冯汉超;基于Hadoop的分布式副本策略研究[D];河北工程大学;2015年
2 张明;IaaS中基于热点数据的存储系统研究与实现[D];哈尔滨工业大学;2015年
3 蒋静远;基于数据通道的非结构化数据多存储系统[D];浙江大学;2015年
4 郭晖;面向高清视频监控的流存储系统设计与实现[D];电子科技大学;2015年
5 许孟杰;嵌入式快速存储模块的研究与实现[D];中国舰船研究院;2015年
6 何洁和;面向POI的分布式结构化存储系统存储引擎设计与实现[D];电子科技大学;2014年
7 王晓;混合存储系统高效快照技术研究[D];北京理工大学;2015年
8 邱登峰;基于Hadoop可公共审计云存储的设计与实现[D];大连理工大学;2015年
9 张致元;电子商品存储系统设计与研究[D];复旦大学;2014年
10 刘秉煦;云存储环境下的混合存储算法研究与实现[D];上海交通大学;2015年
本文编号:1421180
本文链接:https://www.wllwen.com/kejilunwen/jisuanjikexuelunwen/1421180.html