多数据中心云存储环境下多副本管理策略的研究
本文关键词:多数据中心云存储环境下多副本管理策略的研究,,由笔耕文化传播整理发布。
【摘要】:随着全数字化的“大数据”时代的到来,云存储在海量数据的存储与管理中将起到越来越重要的作用。在云存储系统中,常采用副本技术来提高系统的可靠性、安全性、可用性和可扩展性。但是目前云存储环境下的副本管理技术,多局限于单数据中心,从容灾备份和负载均衡的角度,需要研究面向多数据中心的副本管理策略。 面向多数据中心云存储环境的副本管理需要解决-些新的问题,例如,如何选择放置副本的数据中心,如何减少跨数据中心的数据传输,如何维护跨数据中心间数据副本的一致性,以及如何在提高数据可靠性与系统负载均衡的同时兼顾良好的用户体验等。目前,现有的云服务公司虽然已建立起多数据中心云存储系统,但是对其技术细节却鲜有披露。本论文重点针对多数据中心云存储环境下的数据副本管理策略,做了以下研究探索工作: 1.全面了解了云存储系统、多数据中心及副本管理技术,重点研究了典型的云存储系统HDFS中的副本管理策略,并分析了多数据中心云存储系统中副本管理面临的问题; 2.当前没有一个开源实用的面向多数据中心的云存储系统,针对这一问题,基于HDFS系统,本文提出了面向多数据中心的两层层叠式主从存储系统架构模型2CMSSS(2Cascading Master-Slave Storage System),简化了多数据中心云存储系统中副本管理策略的研究工作,从而为研究多数据中心云存储系统多副本管理策略及其后续的扩展、改善工作奠定了基础。 3.提出了基于AHP—逆向云算法的数据中心选择策略。针对数据中心间的动态网络环境与数据中心间的差异性,本文提出了基于AHP—逆向云算法的数据中心选择策略,为后文提出基于数据中心选择策略与用户驱动的数据副本布局策略做了准备; 4.结合云存储系统中用户访问情况和前面提出的数据中心选择策略,本文提出了基于数据中心选择与用户驱动的多数据中心云存储系统数据副本布局策略。仿真实验显示,本文所提出的基于数据中心选择与用户驱动(Data Center 5. Select-User Drive, DCS-UD)的多数据中心云存储系统数据副本布局策略在系统负载均衡、副本访问速率和数据可靠性方面有较大优势; 6.针对多数据中心云存储系统中数据副本一致性维护这一关键问题,本文总结了多数据中心云存储系统中数据副本一致性维护策略的设计目标与思路,并提出了基于2CMSSS和两段锁的数据副本一致性维护策略。实验仿真显示,该策略能够保证数据的强一致性,且用户访问时延较小。
【关键词】:多数据中心 云存储 副本管理 2CMSSS (2Cascading Master-Slave Storage System) AHP-逆向云 两段锁
【学位授予单位】:厦门大学
【学位级别】:硕士
【学位授予年份】:2014
【分类号】:TP333
【目录】:
- 摘要4-6
- Abstract6-12
- 第一章 绪论12-22
- 1.1 研究背景12-17
- 1.2 研究意义17-18
- 1.3 论文主要工作18-21
- 1.4 本章小结21-22
- 第二章 云存储环境下副本管理策略的相关研究22-30
- 2.1 引言22
- 2.2 Hadoop Distributed File System(HDFS)22-27
- 2.3 其它关于云存储系统副本管理的研究工作27-28
- 2.4 已有云存储系统副本管理策略研究的不足28-29
- 2.5 本章小结29-30
- 第三章 2CMSSS存储系统模型30-38
- 3.1 引言30
- 3.2 2CMSSS设计理念与前提30-31
- 3.3 2CMSSS存储系统31-36
- 3.4 本章小结36-38
- 第四章 基于AHP-逆向云算法的数据中心选择策略38-50
- 4.1 引言38
- 4.2 选择数据中心的意义38
- 4.3 AHP层次分析法38-39
- 4.4 云理论39-40
- 4.5 基于AHP—逆向云算法的数据中心选择策略40-47
- 4.6 本章小结47-50
- 第五章 基于数据中心选择策略与用户驱动的副本布局机制50-60
- 5.1 引言50
- 5.2 基于数据中心选择策略与用户驱动的副本布局机制50-53
- 5.3 仿真实验及分析53-59
- 5.4 本章小结59-60
- 第六章 基于2CMSSS与两段锁的副本一致性维护策略60-66
- 6.1 引言60
- 6.2 设计目标与思路60-64
- 6.3 仿真实验及分析64-65
- 6.4 本章小节65-66
- 第七章 总结与展望66-68
- 7.1 全文总结66-67
- 7.2 未来工作展望67-68
- 参考文献68-72
- 攻读硕士期间发表的论文72-74
- 致谢74
【参考文献】
中国期刊全文数据库 前10条
1 李德毅,刘常昱;论正态云模型的普适性[J];中国工程科学;2004年08期
2 刘田甜;李超;胡庆成;张桂刚;;云环境下多副本管理综述[J];计算机研究与发展;2011年S3期
3 李德毅,孟海军,史雪梅;隶属云和隶属云发生器[J];计算机研究与发展;1995年06期
4 蒋试伟;欧阳松;;基于副本索引的P2P副本一致性维护策略[J];计算机工程;2008年19期
5 刘桂花;宋承祥;刘弘;;云发生器的软件实现[J];计算机应用研究;2007年01期
6 刘贝;汤斌;;云存储原理及发展趋势[J];科技信息;2011年05期
7 董继光;陈卫卫;田浪军;吴海佳;;大规模云存储系统副本布局研究[J];计算机应用;2012年03期
8 颜秉珩;张明富;张俊;;云数据中心操作系统副本分布算法的设计与实现[J];计算机应用与软件;2011年11期
9 姚远;王丽芳;蒋泽军;;HDFS一致性管理的研究[J];现代电子技术;2012年08期
10 高宏卿;汪浩;;基于云存储的教学资源整合研究与实现[J];现代教育技术;2010年03期
中国博士学位论文全文数据库 前2条
1 郭良敏;P2P文件共享系统中的副本技术研究[D];中国科学技术大学;2011年
2 宋玮;分布式存储系统中的节点自主性问题研究[D];华南理工大学;2010年
本文关键词:多数据中心云存储环境下多副本管理策略的研究,由笔耕文化传播整理发布。
本文编号:453827
本文链接:https://www.wllwen.com/kejilunwen/jisuanjikexuelunwen/453827.html