基于矩阵运算的最小冗余存储再生码MSRRC研究
本文关键词: 分布式系统 再生码 数据修复 出处:《计算机科学》2014年S2期 论文类型:期刊论文
【摘要】:分布式存储系统常常使用纠删码冗余技术提高数据的安全性和可靠性,从而使系统具有自修复失效数据的能力,但传统纠删码在修复失效节点时需要传输的数据量较大。再生码是纠删码的一种改进形式,它的主要特点是无需下载整个数据文件就能恢复单个节点数据,从而有效减少了数据修复时的网络带宽。相关文献证明数据修复时存在最小存储再生点(MSR),由此提出最小冗余存储再生码MSRRC。本研究主要采用数据矩阵和修复矩阵实现MSRRC再生码,通过实例详细给出再生码的实现过程,并理论证明其正确性,最后仿真实验验证了MSRRC的有效性。
[Abstract]:Distributed storage systems often use erasure code redundancy technology to improve the security and reliability of data, so that the system has the ability to self-repair invalid data. However, the traditional erasure code needs to transmit a large amount of data when repairing the invalid node. The regenerative code is an improved form of erasure code. Its main feature is that the single node data can be recovered without downloading the entire data file. Therefore, the network bandwidth of data repair is reduced effectively. The relevant literature proves that there is a minimum storage regeneration point (MSRs) in data repair. In this study, the data matrix and the repair matrix are used to realize the MSRRC regenerative code, and the implementation process of the regenerated code is given in detail by an example. The validity of MSRRC is proved by theory. Finally, the validity of MSRRC is verified by simulation experiments.
【作者单位】: 广东技术师范学院教育技术与传播学院;华南理工大学计算机科学与工程学院;广东金融学院计算机系;
【基金】:国家自然科学基金(60573145) 广东省科技创新项目(2013KJCX0116) 广东省教育科学规划项目(2012JK048) 广东高校优秀青年创新人才培养计划项目(2012WYM_0088) 数字媒体本科专业核心课程体系研究项目资助
【分类号】:TP333
【正文快照】: 本文受国家自然科学基金(60573145),广东省科技创新项目(2013KJCX0116),广东省教育科学规划项目(2012JK048),广东高校优秀青年创新人才培养计划项目(2012WYM_0088),数字媒体本科专业核心课程体系研究项目资助。为提高系统可靠性,分布式存储系统常常使用纠删码技术,这些系统有R
【参考文献】
相关期刊论文 前2条
1 王禹;赵跃龙;侯f ;;基于副本管理的P2P存储系统可靠性分析[J];华南理工大学学报(自然科学版);2011年02期
2 王禹;赵跃龙;侯f ;;分布式存储系统最小带宽再生码研究[J];小型微型计算机系统;2012年08期
【共引文献】
相关期刊论文 前1条
1 王禹;赵跃龙;侯f ;;分布式存储系统最小带宽再生码研究[J];小型微型计算机系统;2012年08期
相关博士学位论文 前2条
1 王禹;分布式存储系统中的数据冗余与维护技术研究[D];华南理工大学;2011年
2 谭鹏许;云计算环境下安全分布式存储架构与容错技术研究[D];解放军信息工程大学;2013年
相关硕士学位论文 前3条
1 李岱瞳;一种基于物理拓扑结构的分层Chord算法[D];东北大学;2011年
2 陈玲玲;基于副本管理的P2P存储系统模型建立与性能分析[D];燕山大学;2012年
3 刘通;基于HDFS的小文件处理与副本策略优化研究[D];中国海洋大学;2014年
【二级参考文献】
相关期刊论文 前3条
1 王禹;赵跃龙;侯f ;;基于副本管理的P2P存储系统可靠性分析[J];华南理工大学学报(自然科学版);2011年02期
2 王禹;赵跃龙;侯f ;;P2P存储系统副本一致性维护策略[J];计算机工程;2010年01期
3 田敬;代亚非;;P2P持久存储研究[J];软件学报;2007年06期
【相似文献】
相关期刊论文 前10条
1 闫钧华,张焕春,经亚枝;一种改进的分布式系统任务名字解析机制[J];华中科技大学学报(自然科学版);2004年01期
2 姚星;基于分布式系统的设计模式[J];计算机应用;2004年S2期
3 陈世翔;胡爱群;;分布式系统可靠性的一种计算方法[J];计算机应用;2007年S1期
4 姜冬;王慧强;冯光升;吕宏武;林俊宇;;基于模糊层次化评估的分布式系统自毁感知方法及应用[J];小型微型计算机系统;2012年04期
5 ;分布式系统概念与设计[J];计算机教育;2013年08期
6 陆维明;一种分布式系统的设计原理[J];计算机学报;1992年06期
7 毕军,吴建平,朱江;基于扩展变迁系统的分布式系统一致性测试研究[J];电子学报;2000年02期
8 丛桂茹;分布式系统在石化中的应用[J];河南机电高等专科学校学报;2001年02期
9 陈艳芬;分布式系统中的模式应用(上)[J];广东通信技术;2002年06期
10 陈宁;王忠仁;丁香荣;;分布式系统中的全局状态算法及实现[J];计算机科学;2002年09期
相关会议论文 前10条
1 许赵云;黄林鹏;;分布式系统动态更新的研究[A];2007年全国开放式分布与并行计算机学术会议论文集(下册)[C];2007年
2 何明;裘杭萍;杨飞;刘勇;;基于可信分布式系统的可信认证技术研究[A];全国计算机安全学术交流会论文集(第二十三卷)[C];2008年
3 殷跃鹏;郭长国;李小玲;王怀民;;基于事件的分布式系统行为分析框架[A];2010年全国开放式分布与并行计算机学术会议论文集[C];2010年
4 王晓鹏;苏亮;韩伟红;周斌;;大型分布式系统部署一致性的研究与实现[A];2006年全国开放式分布与并行计算机学术会议论文集(三)[C];2006年
5 王刚;乔纯捷;王跃科;;基于时钟同步的分布式系统一致全局状态[A];第三届全国虚拟仪器大会论文集[C];2008年
6 周方;周光霞;;分布式系统软件可靠性评估的研究[A];2005第二届电子信息系统质量与可靠性学术研讨会论文集[C];2005年
7 冯锡炜;贾传荧;杨家轩;;JMS技术在分布式系统中的应用与实现[A];促进企业信息化进程——第十届中国Java技术及应用大会文集[C];2007年
8 蒋勇;李光文;张若文;;多业务数字分布式系统(MDAS)及其应用[A];四川省通信学会2013年学术年会论文集[C];2013年
9 徐长盛;高欣;;分布式系统与Ice[A];全国冶金自动化信息网2009年会论文集[C];2009年
10 刘渊;姜建国;缪继东;范晓岚;;一个分布式系统通信控制软件的设计与实现[A];中国工程物理研究院科技年报(2002)[C];2002年
相关重要报纸文章 前9条
1 抚苏;大数据带来价值[N];电脑报;2013年
2 ;首席“云”官[N];中国计算机报;2009年
3 本报记者 黄舍予;得“数据”者得天下[N];人民邮电;2012年
4 范范 编译;Docker威力:轻松化解“云锁定”[N];网络世界;2014年
5 ;IBM改进大机管理[N];网络世界;2006年
6 首都经济贸易大学 金勇;用Java和XML构建分布式系统[N];计算机世界;2002年
7 沈建苗编译;嬗变中的大型机[N];计算机世界;2006年
8 沈建苗 编译;弃用大型机时机已成熟?[N];计算机世界;2006年
9 ;企业用户再次倾心大型机[N];网络世界;2008年
相关博士学位论文 前10条
1 郑红;分布式系统形式化建模技术研究[D];中国科学院研究生院(软件研究所);2003年
2 尚庆红;半分布式系统资源发现与资源分配研究[D];电子科技大学;2013年
3 王德俊;面向服务的分布式系统动态更新研究[D];上海交通大学;2010年
4 陈晓江;分布式系统软件体系结构建模与开发方法研究[D];西北大学;2010年
5 何盼;面向可靠性优化设计的分布式系统资源分配研究[D];重庆大学;2012年
6 唐小勇;异构并行分布式系统可信调度理论与方法研究[D];湖南大学;2013年
7 龚奕利;分布式环境中的资源发现研究[D];中国科学院研究生院(计算技术研究所);2006年
8 彭舰;基于CORBA的分布式系统中实时—容错性的研究——分布式系统中动态调度的设计与实现[D];电子科技大学;2004年
9 刘国良;分布式系统中回卷恢复技术研究[D];重庆大学;2012年
10 闵帆;基于试探的任务分配算法研究[D];电子科技大学;2003年
相关硕士学位论文 前10条
1 殷跃鹏;基于事件的分布式系统行为分析框架的设计与实现[D];国防科学技术大学;2010年
2 胡俊;构建分布式系统的关键技术研究与实现[D];南京邮电大学;2012年
3 谢志海;分布式系统测试关键技术研究[D];西安电子科技大学;2013年
4 卢旭;分布式系统自愈调控关键技术研究[D];哈尔滨工程大学;2009年
5 徐志成;策略性分布式系统中机制设计问题的研究[D];上海交通大学;2009年
6 李艳丽;分布式系统测试方法研究及应用[D];南京邮电大学;2011年
7 项震;基于多核处理机构建分布式系统的关键技术研究[D];南京邮电大学;2011年
8 陈亚龙;高校学分制学费信息分布式系统的设计[D];电子科技大学;2008年
9 任伟;Social Networks对恢复大规模分布式系统的性能影响研究[D];电子科技大学;2010年
10 张红亮;分布式系统时钟同步技术的研究与应用[D];国防科学技术大学;2002年
,本文编号:1449612
本文链接:https://www.wllwen.com/kejilunwen/jisuanjikexuelunwen/1449612.html