基于Hadoop+Mysql架构的稽核系统的设计

摘要

广西移动稽核系统与BOSS等系统建立了大量的数据接口,每天从这些系统获取以亿为单位的大量数据,通过这些海量数据进行复杂的计算从而实现业务稽核。为解决海量数据背景下稽核系统所面临的信息过载以及经济性数据存储问题,提出基于Hadoop+Mysql架构的稽核系统的设计方案。Hadoop是处理大数据的分布式框架,能够进行分布式高并发运算,在稽核系统做分布式运算和稽核原始数据文件存储,保证系统数据处理的准确性、及时性。Mysql主要用于稽核结果数据的存储,方便进行稽核业务报表的展示。