Hadoop云计算平台的参数优化算法

发布时间：2017-12-22 12:21

本文关键词：Hadoop云计算平台的参数优化算法　出处：《华中师范大学学报(自然科学版)》2016年02期 　论文类型：期刊论文

【摘要】：为提高Hadoop云计算平台的性能,该文提出了一种跨层的参数优化模型.首先分析了云计算平台的工作流程,将系统参数与流程对应,并加入基础设施即服务与平台即服务层的参数,找出对Hadoop集群效率作用显著的参数,并把这些参数值作为性能参数,构建成性能参数模型,再用启发式蚁群算法搜寻性能较优的可行参数,并不断修正,找出最佳参数组合,最后整合跨层的参数来提高Hadoop云计算平台的性能.实验表明,该算法可行,性能优良.
【作者单位】：广东金融学院互联网金融与信息工程系;广东财经大学信息学院;湖南人文科技学院信息科学与工程系;
【基金】：国家自然科学基金项目(61472135)) 广东省科技计划项目(2014B010102007)
【分类号】：TP393.09
【正文快照】： Hadoop是Apache基金组织下的一个开源的可运行于大规模集群上的分布式并行编程框架,搭建Hadoop云计算平台进行海量数据存储是目前最为广泛应用的开源云计算软件平台[1-2].Hadoop云计算平台的系统参数配置,直接关系到系统资源的利用情况,性能参数值的合理设定对Hadoop云计算平

【相似文献】

中国期刊全文数据库前3条

1 林伟伟;;一种改进的Hadoop数据放置策略[J];华南理工大学学报(自然科学版);2012年01期

2 王志力;;云计算下Hadoop平台的搭建与实践[J];中国科技信息;2014年09期

3 ;[J];;年期

中国硕士学位论文全文数据库前6条

1 张兴平;基于Hadoop的微博用户情感分类研究与实现[D];西安电子科技大学;2014年

2 郑天红;基于Hadoop的网络流量分流并行化设计与实现[D];内蒙古大学;2012年

3 孙佳;基于Hadoop的邮件敏感词检测与告警技术研究[D];东华大学;2015年

4 关文斌;基于Hadoop的微博用户及微博影响力排名研究[D];暨南大学;2015年

5 黄兴;基于微博信息分析对旅游景点热度预测系统的设计与实现[D];杭州电子科技大学;2014年

6 吕峰;基于Hadoop海量数据微博系统的设计与实现[D];北京工业大学;2013年