基于HDFS的云存储服务系统研究

发布时间：2020-04-13 11:16

【摘要】： 随着互联网技术的飞速发展,数据量呈现出爆炸性增长的趋势,企业面临着海量数据管理困难、数据存储成本高、可靠性低等难题。越来越多的企业开始将数据存储分离出来,向专业云存储服务供应商寻求帮助以进行数据的分布式管理。云存储服务具有高可靠性、高通用性、高扩展性及大容量存储等特点,因此进行云存储服务系统的研究不仅紧跟IT技术发展的趋势,而且具有较高的应用价值。 本文的研究内容为基于HDFS的云存储服务系统研究,旨在通过构建基于HDFS的云存储服务系统,解决企业的海量数据存储难题,降低实施分布式文件系统的成本,促进Hadoop技术的推广。云存储是在当前广泛讨论的云计算概念上延伸和发展出来的,可以将网络中大量不同类型的存储设备进行整合,从而对外提供数据存储和业务访问的功能。Hadoop分布式文件系统(Hadoop Distributed File System, HDFS)是开源云计算软件平台Hadoop框架的底层实现部分,具有高传输率、高容错性等特点,可以以流的形式访问文件系统中的数据,从而解决访问速度和安全性问题,实现海量数据的存储管理。 本文首先阐述了云存储的相关理论,介绍了云存储的定义、云存储系统结构和云存储服务系统的应用等内容；接着对HDFS数据管理机制及其实现技术进行了详细分析,为论文下一步的研究提供了技术保障；最后,通过结合实际需求,在对某云存储服务系统业务分析的基础上,对服务系统存储体系结构、功能结构、数据库及运行环境进行了设计,并对该系统加以实现,从而为企业海量数据存储提供了一个有效的解决方案。 本文主要实现了一个面向企业应用的云存储服务系统,解决了大规模非结构化数据的在线存储、查询、备份等问题,为企业应用提供了高效能、高可靠性的服务。尽管云存储服务系统目前已经取得了一定的研究成果,但对于如何保障云中数据的安全和隐私这一问题,仍是今后研究的重点,也是亟待解决的难题。
【学位授予单位】：大连海事大学
【学位级别】：硕士
【学位授予年份】：2010
【分类号】：TP333

【引证文献】

相关期刊论文 前10条

1 孙福权;张达伟;程勖;刘超;;基于Hadoop企业私有云存储平台的构建[J];辽宁工程技术大学学报(自然科学版);2011年06期

2 黄滨;徐勇;吕岩;;基于Hadoop云存储系统在设计院的应用研究[J];信息安全与技术;2012年09期

3 邓见光;潘晓衡;袁华强;;云存储及其分布式文件系统研究[J];东莞理工学院学报;2012年05期

4 黄振华;;基于云计算的虚拟化存储技术研究[J];硅谷;2012年20期

5 辛大欣;屈伟;;基于Hadoop的云计算算法研究[J];电子设计工程;2013年03期

6 薛莹;;基于HDFS存储服务系统的研究和应用[J];硅谷;2013年01期

7 葛君伟;李志强;方义秋;;云存储环境下基于分散式服务器的Erasure Code算法[J];计算机应用;2011年11期

8 张渊源;张琴燕;蒋关富;;面向Web电子产品信息分布式检索系统的设计与实现[J];计算机应用;2013年04期

9 高新成;王莉利;;基于Hadoop的校园云存储系统的研究[J];陕西理工学院学报(自然科学版);2012年04期

10 许维龙;张彦;朱洪亮;辛阳;;基于HDFS的数据备份系统的设计与实现[J];信息网络安全;2012年10期

相关硕士学位论文 前10条

1 朴红吉;基于分布式多索引融合的专利信息检索研究[D];大连理工大学;2010年

2 苏伟兵;个性化Web商务信息融合关键技术研究[D];浙江大学;2010年

3 张倩;基于云计算环境的数据管理系统研究与应用[D];北京邮电大学;2011年

4 王贤伟;基于Hadoop的外观专利图像检索系统的研究与实现[D];广东工业大学;2011年

5 徐忠明;基于Hadoop的网络验证平台的研究[D];广东工业大学;2011年

6 叶雄杰;基于云存储的移动视频监控系统研究[D];广东工业大学;2011年

7 杨丽婷;基于云计算数据存储技术的研究[D];中北大学;2011年

8 郝伟;湖南移动网管集中云存储平台搭建与测试[D];中南大学;2010年

9 陈剑锐;基于Hadoop海量数据存储仿真平台的研究与设计[D];华南理工大学;2011年

10 王彩亮;云存储环境下数据副本管理策略研究[D];云南大学;2011年

，

本文编号：2625938