基于Hadoop的数据处理平台的设计与开发研究

摘要

随着计算机和网络在人们工作和生活中的广泛普及,数据量急剧增加.目前,如何有效地收集和存储数据是当前需要解决的主要问题.在Hadoop技术的基础上,给出了海量数据处理平台的系统需求分析、系统架构设计和关键模块设计,并阐述了基于Hadoop技术的数据处理平台开发的要点,为相关研究人员提供了一些参考.