大数据环境下Hadoop分布式系统的研究与设计

摘要

随着互联网应用的飞速发展和信息的社会化数据呈爆发式的增长，传统的关系数据库在处理分析如此海量的数据时出现性能和可扩展性的瓶颈，通过介绍目前大数据时代面临的挑战，分析了大数据对IT系统的挑战以及针对大数据业务特点的应对策略。目前大数据技术目前还没形成统一标准，但业界已经广泛使用Hadoop分布式系统作为其大数据处理平台，对大数据环境下Hadoop分布式系统进行了详尽的研究与设计，包括分布式文件系统、并行计算模型、分布式数据库、分布式锁服务等各个功能模块，大数据环境下的Hadoop分布式系统将更有效支撑未来电信运营商业务的发展。