面向云存储系统的副本创建策略研究

发布时间：2017-11-01 00:11

  本文关键词：面向云存储系统的副本创建策略研究

  更多相关文章： 云存储 副本创建 副本冗余度 副本布局 TOPSIS算法 灰度理论

【摘要】：云存储是云计算概念的延伸与发展,具有存储容量大、性能高、成本低、通用性高和易扩展性的特点。它的出现与发展,改变了传统的数据存储方式,并为数据的存储和管理提供了优秀的解决方案,成为了很多企业用户和个人用户提高效率、减少成本的重要选择。 在云存储系统中,副本技术是一种常用的技术,为数据创建副本对于系统的可用性与可靠性以及减小系统的响应时间具有重要的作用。副本技术策略主要包括副本的创建机制、副本的删除机制、副本定位机制和副本的一致性维护机制。为了提高系统的可用性与性能,本文以HDFS为研究平台,主要研究副本创建策略中的副本冗余度和副本的布局策略。本文中的主要工作有： 1、分析研究了云存储的研究现状和关键技术,以HDFS为基本架构,重点研究了云存储中的副本管理技术,并总结了其管理特点和存在的问题。 2、针对HDFS设置副本冗余度的不足,本文提出了基于文件访问热度的副本冗余策略机制,该机制可以根据文件的被访问频率动态确定副本的冗余度,并通过增加了文件热度的更新队列,来解决短时间内访问量突增时副本冗余度的确定。文中具体描述了文件热度的计算,文件热度队列的更新以及如何通过热度确定冗余度的策略,并描述了副本创建的流程。 3、针对HDFS的副本布局方面,在机架感知基础上,本文提出了一种基于用户数据分类和改进TOPSIS算法的副本布局策略,首先基于用户需求对数据进行分类,并对传统的TOPSIS算法进行灰色关联系数的改进,然后通过改进的TOPSIS算法对节点排序,最后选择适合用户需求的最优节点进行副本布局。
【关键词】：云存储 副本创建 副本冗余度 副本布局 TOPSIS算法 灰度理论
【学位授予单位】：首都师范大学
【学位级别】：硕士
【学位授予年份】：2014
【分类号】：TP333
【目录】：

• 摘要4-5
• Abstract5-9
• 图目录9-10
• 表目录10-11
• 第1章 绪论11-25
• 1.1 研究背景11-21
• 1.1.1 云计算11-14
• 1.1.2 云存储14-19
• 1.1.3 副本管理技术19-21
• 1.2 研究现状21-23
• 1.3 本文主要研究内容及组织结构23-24
• 1.4 本章小结24-25
• 第2章 相关技术研究25-35
• 2.1 典型云存储系统25-30
• 2.1.1 Google文件系统25-28
• 2.1.2 Hadoop分布式文件系统28-30
• 2.1.3 Amazon云存储系统30
• 2.2 副本创建技术30-33
• 2.2.1 典型副本创建技术31
• 2.2.2 HDFS中的副本创建技术31-33
• 2.3 本章小结33-35
• 第3章 基于文件访问热度的数据副本冗余策略35-45
• 3.1 HDFS默认副本冗余策略35-36
• 3.2 基于文件访问热度的数据副本冗余策略36-41
• 3.2.1 文件热度的计算36-38
• 3.2.2 热度队列更新38
• 3.2.3 最大副本数与最小副本数38-40
• 3.2.4 确定副本冗余度40-41
• 3.3 实验与分析41-43
• 3.4 本章小结43-45
• 第4章 基于数据分类与改进TOPSIS算法的副本布局策略45-61
• 4.1 数据副木布局相关技术45-49
• 4.1.1 HDFS默认副本布局策略45-46
• 4.1.2 TOPSIS算法46-48
• 4.1.3 基于灰色关联系数的TOPSIS算法48-49
• 4.2 基于数据分类与改进TOPSIS算法的副本布局策略49-57
• 4.2.1 用户需求分类50-51
• 4.2.2 机架选择策略51
• 4.2.3 节点评价指标51-53
• 4.2.4 确定各类数据属性权重53-54
• 4.2.5 数据放置计算过程54-57
• 4.3 实验与分析57-59
• 4.4 木章小结59-61
• 第5章 总结与展望61-63
• 5.1 本文工作总结61
• 5.2 下一步的主要工作61-63
• 参考文献63-65
• 致谢65-67
• 攻读硕士学位期间论文与科研情况67

【参考文献】

中国期刊全文数据库 前10条

1 虎莹;;浅谈云计算在气象事业中的展望[J];电脑知识与技术;2009年21期

2 付智慧;;云计算实施存在的问题[J];电脑知识与技术;2009年32期

3 郑子华,陈家祯,陈利永;基于灰色绝对关联度的边缘检测算法[J];福建师范大学学报(自然科学版);2004年04期

4 阿里木江·阿布力克木;古丽加玛丽·胡加阿布都拉;库尔班江·托乎提;马铮;;云计算的应用价值及其安全性研究[J];计算机光盘软件与应用;2012年06期

5 刘田甜;李超;胡庆成;张桂刚;;云环境下多副本管理综述[J];计算机研究与发展;2011年S3期

6 田怡萌;李小勇;刘海涛;;分布式文件系统副本一致性检测研究[J];计算机研究与发展;2012年S1期

7 陈雷,王延章;基于熵权系数与TOPSIS集成评价决策方法的研究[J];控制与决策;2003年04期

8 翟振杰;刘斌;党耀国;;一种新的关联度量化模型及其在农民收入结构分析中的应用[J];农业系统科学与综合研究;2006年01期

9 董继光;陈卫卫;田浪军;吴海佳;;大规模云存储系统副本布局研究[J];计算机应用;2012年03期

10 高广飞;姚军;;基于Hadoop云平台的矿井指纹定位算法研究[J];金属矿山;2013年12期

中国博士学位论文全文数据库 前1条

1 郭良敏;P2P文件共享系统中的副本技术研究[D];中国科学技术大学;2011年

，

本文编号：1124384