基于Hadoop大数据平台的搭建及其测试研究

摘要

Hadoop作为当今大数据时代下最流行的技术之一,对学术的发展和商业模式都产生了深远的影响。该文首先简单地介绍了Hadoop及其核心组成部分HDFS、MapReduce的技术原理,分析比较了CDH Hadoop和Apache Hadoop的特点,然后详细说明了如何在Ubuntu系统下安装并搭建CDH Hadoop平台,并在单机模式下实现Hadoop的伪分布式环境的配置,最后简要地提出了Hadoop的安装配置过程中的常见问题及其解决办法。