基于云计算的海量数据虚拟存储的研究与设计

发布时间：2021-08-25 04:20

　　过去十年中,数据管理领域出现了新的挑战—数据量爆炸性增长。问题来源于一个事实,即访问时间和硬盘驱动器的传输速率没有跟上步伐,所以限制了改善的进程。当今,虚拟存储系统的概念和工具已经非常成熟,它们为科学的数据管理带来了曙光;同时,云计算极大地吸引了科学界人士,他们越来越将云计算视为解决大量新数据的有效办法,因为云计算不仅使得大规模的设施设计和硬件建设成为可能,而且允许部分用户组管理、处理和从各种资源中分析大量的有用数据。如何将虚拟存储与云计算相结合来解决海量数据存储问题,现在已经成为了很多云计算和虚拟存储研究者共同研究的目标。因为虚拟存储可以为系统带来更高的可靠性和数据一致性,而云计算能够给系统带来高性能,将它们相结合构成基于云计算的虚拟存储系统势必成为今后海量数据存储的首要选择方式。本文基于这个观点提出了一种优化的副本放置策略—最小值算法。该算法旨在充分考虑系统负载平衡的前提下,对每个节点的性能/负载比作出科学计算,从而使得数据的主、次副本能够放置在最佳的位置,同时针对系统中可能出现的诸如计算错误、节点内存不足等各种实际问题都提出了解决方案。 

【文章来源】：电子科技大学四川省 211工程院校 985工程院校 教育部直属院校

【文章页数】：67 页

【学位级别】：硕士

【文章目录】：
摘要
Abstract
第一章 绪论
    1.1 研究背景
        1.1.1 云计算的发展现状
        1.1.2 目前先进的云计算系统
        1.1.3 虚拟存储技术
    1.2 课题研究目的与意义
        1.2.1 数据管理的需求
        1.2.2 当前云计算面临的几大问题
    1.3 课题研究内容与论文结构
        1.3.1 课题研究内容
        1.3.2 论文结构
第二章 相关理论研究
    2.1 容灾系统
        2.1.1 容灾系统的概念
        2.1.2 容灾系统的关键技术
        2.1.3 典型分布式容灾系统
    2.2 副本备份
        2.2.1 副本管理
        2.2.2 负载均衡
        2.2.3 数据块扫描器
        2.2.4 节点退役
        2.2.5 集群内的数据复制
    2.3 本章小结
第三章 基于云计算的海量数据虚拟存储的设计与实现
    3.1 三层容灾系统
    3.2 一种改进的副本放置策略
    3.3 针对小文件的优化系统
        3.3.1 需求分析
        3.3.2 优化系统的意义
        3.3.3 方法核心思想
    3.4 本章小结
第四章 基于云计算的海量数据虚拟存储的测试
    4.1 方案部署
    4.2 运行结果以及分析
        4.2.1 数据集
        4.2.2 写操作
        4.2.3 读操作
        4.2.4 原型系统验证
        4.2.5 相关工作
        4.2.6 结论
    4.3 本章小结
第五章 总结与展望
致谢
参考文献


【参考文献】：
期刊论文
[1]远程容灾系统设计框架[J]. 于新华,刘川意.  计算机工程与应用. 2006(24)
[2]容灾的理论与关键技术分析[J]. 王树鹏,云晓春,余翔湛,胡铭曾.  计算机工程与应用. 2004(28)
[3]容灾技术概览[J]. 侯海波,杨军.  网络安全技术与应用. 2004(09)



本文编号：3361384