大数据时代下提升数据分析系统数据处理能力的变革

摘要

随着移动业务的快速发展,数据量不断增大,上海联通数据中心的传统IOE的数据加工模式已经远远不能满足业务发展的需要.文章以传统经分系统架构变革可行性为例,提出数据分析型系统转型的建议;通过总结上海联通传统经分的现状,结合云计算和大数据发展的方向,探索大数据处理平台搭建混搭结构的选型思路,利用分布式并行处理技术减小数据仓库的扩容压力;提升数据作业的处理速度及系统的响应速度;从而实现数据中心由原来提供单一的企业经营分析决策的能力转变到适应大数据处理的能力.