基于HBase的小文件存储系统的研究及实现

发布时间：2022-01-25 11:25

　　如今,信息社会已进入云计算时代,数据的生产速度越来越快,一些企业和组织机构积累的数据量也越来越庞大,海量数据的处理和应用已成为当今信息技术领域所面临的巨大难题。Hadoop作为处理海量数据的一大利器,是当前云计算技术中最热门的话题之一,而与Hadoop同一阵营的HBase则为海量数据的实时读写提供了一套解决方案。HBase是Apache Hadoop生态圈的重要组成部分,通常使用Hadoop文件系统（HDFS）作为其底层的存储平台,是一个高可靠性,高性能,面向列且伸缩性强的分布式非关系数据库。HBase在起初设计时忽略了许多SQL操作并着重加强了对系统高性能、高容量、高可靠性和可伸缩性等特性的开发,已成为现今最流行的NoSQL数据库之一。本文首先从当前形势出发,探讨了当前云计算时代的热点问题,归纳总结出云计算的概念和技术体系结构,理清了当前技术变革的原因、动力和方向。然后,通过对Hadoop两个核心组件和NoSQL理论的研究和介绍,详细的说明了当前业界用以处理海量数据的最先进的分布式系统的设计思想和架构技术,阐述了HBase诞生的技术基础和理论基础。随后详细的阐述了HBase系统的设计... 

【文章来源】：东北大学辽宁省 211工程院校 985工程院校 教育部直属院校

【文章页数】：79 页

【学位级别】：硕士

【部分图文】：

系统逻辑结构图

【参考文献】：
期刊论文
[1]Parallel Bulk-Loading of Spatial Data with MapReduce:An R-tree Case[J]. LIU Yi,JING Ning,CHEN Luo,CHEN Huizhong College of Electronic Science and Engineering,National University of Defense Technology,Changsha 410073,Hunan,China.  Wuhan University Journal of Natural Sciences. 2011(06)
[2]HDFS下载效率的优化[J]. 曹宁,吴中海,刘宏志,张齐勋.  计算机应用. 2010(08)

硕士论文
[1]基于HDFS的云存储服务系统研究[D]. 黄晓云.大连海事大学 2010



本文编号：3608451