基于海量数据存储的性能测试与优化研究

发布时间：2017-12-04 07:39

  本文关键词：基于海量数据存储的性能测试与优化研究

  更多相关文章： 海量数据存储 云存储 Hadoop集群 LoadRunner 性能测试 性能优化

【摘要】：随着数据存储规模的不断扩大,传统磁盘阵列技术和网络存储技术已经不能满足海量数据存储的性能需求,高性能的云存储技术逐渐取代传统数据存储技术。为了满足海量数据存储系统的性能需求,本文使用云存储服务代表之一的Hadoop分布式存储框架,结合非关系型数据库HBase、分布式文件系统HDFS和并行编程模型MapReduce,为库存与物流配送管理系统搭建和部署Hadoop集群,满足系统的分布式、大容量、高性能和高扩展性的要求。严格按照性能测试的流程,使用自动化测试工具LoadRunner对系统进行性能测试,整理测试结果,分析系统的性能瓶颈,最后通过HBase数据库优化、Hadoop集群优化、Web服务器升级和作业调度策略改进,实现系统性能优化的目标。
【学位授予单位】：长春理工大学
【学位级别】：硕士
【学位授予年份】：2014
【分类号】：TP333

【参考文献】

中国期刊全文数据库 前3条

1 张鼐;;云计算环境下信息资源共享模式研究[J];情报科学;2010年10期

2 刘娟;豆育升;何晨;唐红;;基于调度器的Hadoop性能优化方法研究[J];计算机工程与设计;2013年01期

3 李爱勤;鲍凌云;冯晓娜;;数字图书馆资源云存储模型研究[J];现代情报;2012年02期

中国硕士学位论文全文数据库 前7条

1 陈剑锐;基于Hadoop海量数据存储仿真平台的研究与设计[D];华南理工大学;2011年

2 陈璐;基于云计算的海量数据存储技术的研究及应用[D];武汉科技大学;2011年

3 曹风兵;基于Hadoop的云计算模型研究与应用[D];重庆大学;2011年

4 邓自立;云计算中的网络拓扑设计和Hadoop平台研究[D];中国科学技术大学;2009年

5 张喜;海量数据存储模式的研究[D];广东工业大学;2012年

6 邰建华;Hadoop平台下的海量数据存储技术研究[D];东北石油大学;2012年

7 成飞龙;基于Hadoop的海量传感数据管理系统[D];南京理工大学;2013年

，

本文编号：1250269