基于Hadoop和Hive的电信行业数据仓库研究

摘要

分析处理海量数据成为各电信运营商急需解决的问题。本文描述的基于Hadoop和Hive的数据仓库能很好的解决这个问题，Hadoop依靠普通的PC集群提供可靠的并行计算服务和存储平台，Hive基于M／R框架，提供类SQL功能的HQL语言，为用户提供了一个高效、海量和便捷的数据仓库平台。通过对电信行业海量话单的分析证明，此数据仓库解决方案在处理海量数据上，具有关系型数据仓库不能比拟的性能。