云计算中Hadoop技术研究与应用综述

发布时间：2018-07-11 15:33

  本文选题：云计算 + 大数据　； 参考：《计算机科学》2016年11期

【摘要】：Hadoop作为当今云计算与大数据时代背景下最热门的技术之一,其相关生态圈与Spark技术的结合一同影响着学术发展和商业模式。首先介绍了Hadoop的起源和优势,阐明相关技术原理,如MapReduce,HDFS,YARN,Spark等;然后着重分析了当前Hadoop学术研究成果,从MapReduce算法的改进与创新、HDFS技术的优化与创新、二次开发与其它技术相结合、应用领域创新与实践4个方面进行总结,并简述了国内外应用现状。而Hadoop与Spark结合是未来的趋势,最后展望了Hadoop未来研究的发展方向和亟需解决的问题。
[Abstract]:Hadoop is one of the most popular technologies in cloud computing and big data era. In this paper, the origin and advantages of Hadoop are introduced, and the related technical principles, such as MapReduceHDFSU YARNSpark, etc., are introduced, and then the current Hadoop academic research results are emphatically analyzed, and the improvement and innovation of MapReduce algorithm and the optimization and innovation of HDFS technology are discussed, and the secondary development is combined with other technologies. Four aspects of innovation and practice in application field are summarized, and the present situation of application at home and abroad is briefly described. The combination of Hadoop and Spark is the trend in the future. Finally, the future research direction of Hadoop and the problems that need to be solved are prospected.
【作者单位】： 空军工程大学信息与导航学院;
【基金】：陕西省自然科学基金项目(2012JZ8005)资助
【分类号】：TP311.13

【相似文献】

相关期刊论文 前10条

1 赵建伟;;大数据初探[J];科技资讯;2013年20期

2 桑庆兵;;大数据在高校的应用与思考[J];南通纺织职业技术学院学报;2013年02期

3 张心源;李白杨;;大数据的概念、技术及应用[J];创新科技;2013年09期

4 魏伟;;银行业应对互联网金融挑战的策略初探——基于大数据背景下的思考[J];福建金融;2014年07期

5 王尧;;基于大数据的数据处理方法研究分析[J];数字技术与应用;2014年06期

6 郭亚军;;大数据时代数字出版服务模式变革研究[J];经济研究导刊;2014年04期

7 谢添;汤浩;;数据大爆炸时代已经到来[J];才智;2013年03期

8 杨剑宁;蔺坤;王翊新;赵勰;;大数据项目的部署分析[J];软件;2013年12期

9 李芬;朱志祥;刘盛辉;;大数据发展现状及面临的问题[J];西安邮电大学学报;2013年05期

10 周亮;;“大数据”技术在浙江烟草新时期的应用[J];硅谷;2013年19期

，

本文编号：2115695