云计算中Hadoop技术研究与应用综述

阅读量：

1969

作者：

夏靖波，韦泽鲲，付凯，陈珍

展开

摘要：

Hadoop作为当今云计算与大数据时代背景下最热门的技术之一,其相关生态圈与Spark技术的结合一同影响着学术发展和商业模式.首先介绍了Hadoop的起源和优势,阐明相关技术原理,如MapReduce,HDFS,YARN,Spark等;然后着重分析了当前Hadoop学术研究成果,从MapReduce算法的改进与创新,HDFS技术的优化与创新,二次开发与其它技术相结合,应用领域创新与实践4个方面进行总结,并简述了国内外应用现状.而Hadoop与Spark结合是未来的趋势,最后展望了Hadoop未来研究的发展方向和亟需解决的问题.

展开

关键词：

云计算 大数据 Hadoop Spark MapReduce

DOI：

10.11896/j.issn.1002-137X.2016.11.002

被引量：

102

年份：

2016