一种分布式编码算法在云存储中的应用

发布时间：2018-01-08 09:13

  本文关键词：一种分布式编码算法在云存储中的应用　出处：《微电子学与计算机》2014年02期 　论文类型：期刊论文

  更多相关文章： 云存储 数据冗余 分布式编码 纠删码

【摘要】：在云存储中为保证数据的完整可靠,必须采用冗余备份的方式存储数据.为了更好的发挥存储节点的作用,在分析现有的冗余方式基础上提出了一种分布式编码算法.在新的冗余方案中编解码操作在各存储节点并行完成,而不需要将整个数据文件集中进行编解码,充分发挥了分布式系统优势.通过实验仿真验证了方法的可行性,大大提高了数据存储速率,提高了数据可用性,改善了系统性能.
[Abstract]:In order to better play the role of the storage node , a distributed coding algorithm is proposed in order to better play the role of the storage node . In the new redundancy scheme , a distributed coding algorithm is proposed . In the new redundancy scheme , the coding and decoding operation is completed in parallel in each storage node , and the advantages of the distributed system are fully realized . The feasibility of the method is verified by the experimental simulation , the data storage rate is greatly improved , the data availability is improved , and the system performance is improved .

【作者单位】： 第二炮兵工程大学信息工程系;中国电子科技集团第十五研究所;
【基金】：国家“八六三”资助项目(2011701AA0213)
【分类号】：TP333
【正文快照】： 1引言云存储是云计算的存储部分,当云计算处理和运算的核心是大数据量的存储和管理时,云计算就必须部署大量的存储设备.云存储作为云计算的底层支撑,通过多种技术的融合,将存储设备虚拟化为弹性、透明、可伸缩、易扩展的存储资源池,并将存储资源池按需分配给授权用户,授权用户

【参考文献】

相关期刊论文 前4条

1 周游;刘鹏;杨盛祥;薛志强;文艾;;基于私有云的数据冗余技术研究[J];电脑知识与技术;2011年01期

2 慕建君,路成业,王新梅;关于纠删码的研究与进展[J];电子与信息学报;2002年09期

3 王意洁,卢锡城;基于Tornado码的复制算法[J];国防科技大学学报;2004年03期

4 余林琛;章巍;林强;许杰星;钟贝;;RS纠删码在云存储中的应用[J];微电子学与计算机;2011年08期

【共引文献】

相关期刊论文 前10条

1 张定京;金鑫;王颖;赵良福;陈德林;;CMMB数据广播文件发生器的设计与实现[J];电视技术;2010年01期

2 艾达;常义林;罗忠;王静;;一种新的IP网络视频通信丢包错误纠正方案[J];电子与信息学报;2006年10期

3 杜江;彭亮;白志;;单向隔离系统中的丢包恢复技术研究与实现[J];计算机光盘软件与应用;2013年17期

4 张灯灿;林春深;万晋;李学来;;用于GPRS无线传输的抗分组丢失算法[J];计算机工程;2009年21期

5 李东辉;沈丽菁;方方;潘晨灵;朱广新;叶保留;;分布式云存储高可用框架研究[J];计算机与数字工程;2014年01期

6 贺X;;一种可靠多播认证方案及其C语言实现[J];信息安全与通信保密;2007年06期

7 蒲若锟;;选择性重传法在IPTV中的应用[J];通信技术;2010年10期

8 胡文波;徐造林;;分布式存储方案的设计与研究[J];计算机技术与发展;2010年04期

9 温明才;刘峰;;基于喷泉码的不等差错保护技术实现[J];计算机技术与发展;2011年04期

10 张莉;;浅析私有存储云在企业中的优势与安全性[J];现代计算机(专业版);2011年15期

相关会议论文 前1条

1 陈进才;程伟;陈希;周功业;;寄生存储冗余机制与实现技术[A];第15届全国信息存储技术学术会议论文集[C];2008年

相关博士学位论文 前3条

1 艾达;视频通信抗分组丢失技术研究[D];西安电子科技大学;2006年

2 白慧慧;多描述图像/视频编码的研究[D];北京交通大学;2008年

3 肖宜龙;随机化数据冗余方法及其在存储系统中的应用[D];电子科技大学;2013年

相关硕士学位论文 前10条

1 徐文强;基于HDFS的云存储系统研究[D];上海交通大学;2011年

2 王晶;网络镜像部署系统中的数据传输模块设计[D];上海交通大学;2012年

3 王鹏;LDPC码的编译码原理及编码设计[D];西安电子科技大学;2004年

4 崔玉美;战术数据链中的纠错编码[D];哈尔滨工程大学;2004年

5 胡凌凌;基于无线局域网的组播通信容错技术研究[D];华中科技大学;2005年

6 王蓉;MPEG-4视频会议中的抗分组丢失研究[D];西安电子科技大学;2007年

7 郭忱;LDPC码编译码算法的研究与应用[D];吉林大学;2007年

8 王克朝;基于冗余机制的网络存储系统可靠性研究[D];华中科技大学;2006年

9 李良刚;对象存储中高可靠性和安全机制的研究[D];华中科技大学;2007年

10 李志永;高可用性P2P文件共享系统关键技术研究[D];华中科技大学;2007年

【二级参考文献】

相关期刊论文 前3条

1 陈全;邓倩妮;;云计算及其关键技术[J];计算机应用;2009年09期

2 孙伟平;汤毅凡;;基于Tornado码的存储冗余算法研究[J];微处理机;2008年02期

3 慕建君,王鹏,王新梅;正则低密度纠删码的分析[J];西安电子科技大学学报;2003年04期

【相似文献】

相关期刊论文 前10条

1 李婷;李晓龙;;云计算的资源管理方法研究[J];电脑与电信;2010年01期

2 于秀芬;张曾昱;;基于云存储架构的随书光盘镜像服务器构建探讨[J];图书馆杂志;2011年02期

3 甘勇;韩姗姗;陈国栋;何振;;基于在线存储的对象放置算法的设计与实现[J];郑州轻工业学院学报(自然科学版);2011年01期

4 谢峰;刘妹娟;;浅析云存储信息服务的发展现状及隐忧[J];科技信息;2011年10期

5 王俊修;;基于云计算架构的视频监控系统应用研究[J];中国安防;2011年08期

6 王平建;荆继武;王琼霄;王展;;云存储中的访问控制技术研究[J];信息网络安全;2011年09期

7 吴吉义;章剑林;傅建庆;平玲娣;;基于Kademlia的云存储系统数据冗余方案研究[J];电信科学;2011年02期

8 黄燕;;云存储在图书馆数字资源存储中的应用[J];现代情报;2011年04期

9 胡冰松;刘文超;万象;谢明;;城市光网环境下的家庭网络云存储应用系统的设计与实现[J];电信科学;2011年05期

10 张琳;;浅析云计算商业化推动缓慢的原因[J];重庆电力高等专科学校学报;2010年02期

相关会议论文 前10条

1 郭春梅;毕学尧;;纠删码的研究与展望[A];第二届中国科学院博士后学术年会暨高新技术前沿与发展学术会议程序册[C];2010年

2 彭成;王树鹏;贾志凯;;基于纠删码的数据消冗存储系统可靠性增强研究[A];2010年第16届全国信息存储技术大会（IST2010）论文集[C];2010年

3 郭建奎;张忠平;朱扬勇;;一种处理生物数据库中数据冗余的方法[A];第二十一届中国数据库学术会议论文集（技术报告篇）[C];2004年

4 焦超;周天彤;李祥学;李建华;;面向灾备的高性能可信存储系统设计[A];第十一届保密通信与信息安全现状研讨会论文集[C];2009年

5 宋相培;于忠臣;;改进型RS(534,518)编码算法的硬件设计[A];2011年通信与信息技术新进展——第八届中国通信学会学术年会论文集[C];2011年

6 陈进才;程伟;陈希;周功业;;寄生存储冗余机制与实现技术[A];第15届全国信息存储技术学术会议论文集[C];2008年

7 周天彤;薛磊;郑东;童天浩;;基于Reed-Solomon编码的容灾存储系统性能分析[A];第十一届保密通信与信息安全现状研讨会论文集[C];2009年

8 丛培杰;孟宪元;王丽华;丛树毓;;MP3编码算法FPGA设计与实现[A];全国第4届信号和智能信息处理与应用学术会议论文集[C];2010年

9 罗香玉;李传佑;汪芸;;纠删码容错组的布局策略研究[A];第18届全国多媒体学术会议（NCMT2009）、第5届全国人机交互学术会议（CHCI2009）、第5届全国普适计算学术会议（PCC2009）论文集[C];2009年

10 李爱波;何涛;;一种无链表小波零树编码算法的DSP实现[A];全国第4届信号和智能信息处理与应用学术会议论文集[C];2010年

相关重要报纸文章 前10条

1 丁吉文 王军强;烟台市电子文件数据冗余处理技术研究课题通过专家鉴定[N];中国档案报;2007年

2 本报记者　顾文;Radware高效狙击数据冗余[N];通信产业报;2006年

3 若木;如何维护服务器[N];中国国门时报;2006年

4 徐蕾;恢复RAID中的数据[N];中国计算机报;2002年

5 ;拒绝冗余功能[N];电脑报;2008年

6 记者 吴秀霞 特约记者 龚辉平;集成基本数据 告别信息孤岛[N];中国船舶报;2008年

7 北京 阮征;给你的数据买保险（上）[N];电脑报;2005年

8 刘丽华 周丹 金水高 胡凯;面向管理的HIS信息集成设计[N];计算机世界;2006年

9 马杰;什么是RAID[N];中国电脑教育报;2002年

10 范志超;IDE RAID建立和维护[N];中国电脑教育报;2002年

相关博士学位论文 前10条

1 肖宜龙;随机化数据冗余方法及其在存储系统中的应用[D];电子科技大学;2013年

2 黄震;大规模分布式存储系统中数据冗余技术研究[D];国防科学技术大学;2012年

3 胡琳;图像阵列的分布式编码研究[D];浙江大学;2006年

4 慕建君;低密度纠删码和网格图复杂度的研究[D];西安电子科技大学;2002年

5 田敬;对等存储系统中的数据可用性与安全性研究[D];北京大学;2007年

6 雷杰;遥感图像编码算法及其硬件实现技术研究[D];西安电子科技大学;2009年

7 唐国维;嵌入式小波图像编码算法及应用研究[D];哈尔滨工程大学;2010年

8 王禹;分布式存储系统中的数据冗余与维护技术研究[D];华南理工大学;2011年

9 吴宪云;分布式信源编码关键技术研究[D];西安电子科技大学;2012年

10 张万松;支持压缩域查询的XML数据压缩方法研究[D];哈尔滨工程大学;2005年

相关硕士学位论文 前10条

1 符永康;云存储中数据安全关键技术研究及系统实现[D];北京邮电大学;2013年

2 周之恒;用于容灾系统的纠删码技术研究[D];上海交通大学;2010年

3 王克朝;基于冗余机制的网络存储系统可靠性研究[D];华中科技大学;2006年

4 辛轶;纠错输出编码算法的研究及其应用[D];福建师范大学;2011年

5 陈宝纯;基于纠删码与HDFS的云文件系统[D];吉林大学;2012年

6 李志永;高可用性P2P文件共享系统关键技术研究[D];华中科技大学;2007年

7 徐文强;基于HDFS的云存储系统研究[D];上海交通大学;2011年

8 范钰华;分布式多描述视频编码研究[D];上海交通大学;2008年

9 颜彦文;数据冗余处理技术在轨道交通AFC系统中的应用[D];上海交通大学;2012年

10 杨明;基于LDPC码的分布式容灾系统及其性能研究[D];哈尔滨工程大学;2012年

，

本文编号：1396494