基于Web的数据质量核查系统的设计与实现

摘要

商务智能系统(BI,又称经营分析系统)是一种将企业中现有的数据转化为知识,帮助企业做出明智的业务经营决策的工具。在通信领域,随着国内电信企业的不断发展和竞争的日趋激烈,运营商们纷纷建立起以“经营分析系统”为核心的企业决策支持体系,通过对公司日常经营数据的分析、挖掘,为公司决策者、各级管理者提供经营决策依据,以实现精细化管理与营销,提升企业的竞争力。商务智能系统是“用数据说话”的系统,数据是分析、挖掘的对象,是正确决策的前提,是商务智能系统的灵魂,确保数据的准确性是商务智能系统不可或缺的基础。数据质量核查系统作为BI的支撑系统,是整个商务智能系统的重要组成部分之一。
　　 基于上述背景,本文设计并实现了一个基于Web的数据质量核查系统,为北京移动的商务智能平台建立了一个系统化的数据质量核查体系,实现了对其数据的全面正确的监控。其中,本人参与完成了如下工作:前期业务调研,系统的功能需求分析与功能结构设计；仓库数据核查中告警处理与监控模块的设计与实现,主要包括告警处理配置、数据质量监控、“我的任务”、规则交维管理、工作流定制五个子模块,实现了对数据质量告警的全面监控与管理；核查结果分析中质量分析模块与质量报告模块的设计与实现,主要实现了对仓库数据核查产生的大量核查结果的整理归纳和多维度分析,并出具相应的分析报告。
　　 建立完善的数据质量核查系统、实现对数据全面正确的监控是实施商业智能的关键步骤之一,是移动经营分析平台的核心。目前,该系统已经在北京移动的商务智能平台中上线使用,成为了保障BI系统数据质量的一个重要部分。自上线之日起,移动业务数据产生的告警次数已累计超过万次,系统及时准确地将错误数据进行定位并产生告警,并由维护人员快速进行处理,有力的保障了整个商务智能系统的健康运行,以及分析数据可靠性,为企业领导决策层全面掌握当前企业运营状况、做出明智决策和企业更好更健康的运营提供了更有力更可靠的保障。