用于海量数据处理的电能质量监测软件开发

摘要

近年来，电能作为一种特殊的商品受到人们越来越多的重视。随着发、供、用电三方对电能质量关注程度的提高以及电价的改革，电能质量监测产品必将成为配电变电站的重要设备。目前，各个测量站点虽然积累了大量现场数据，但在数据管理上存在着零散、随机的弊端，缺少系统的管理，这都为数据的查询和应用带来诸多不便。因此，开发一套电能质量管理软件来处理这些海量数据是非常有必要的。
　　 本文在分析了国内外海量数据处理现状的基础上，提出了一种用文本文件管理海量数据的方法，并基于这种方法设计并实现了一套具有网络通信功能的电能质量管理软件。主要内容如下：
　　 首先，论述了电能质量的基本问题以及主要指标，分析了海量数据的来源以及处理现状，并提出了海量数据的处理方案。
　　 其次，简要介绍了Windows平台下流行的可视化开发工具，数据库管理系统以及数据库的访问技术，并结合论文的需求选择了Visual C++6.0+SQL Server2000作为开发工具，ADO技术作为数据库的访问接口。
　　 接着，将管理软件划分为实时监测模块、系统管理模块、数据存储与分析模块、通信模块以及事件提醒模块这五个功能模块，对各模块进行了具体需求分析，提出了每个模块应具备的功能。
　　 然后，在需求分析的基础上，对软件的界面布局、通信模块、数据库、数据库处理模块、系统管理模块以及事件提醒模块进行了设计。通信模块主要采用基于TCPIP协议的网络编程实现，对通信规约进行了详细设计及说明；数据处理模块的设计是本文的重点，详细设计了海量数据的保存与处理方法，包括数据的接收，数据的解析与存放方式，实时数据、统计数据以及事件数据的保存，数据的管理与使用；系统管理模块设计了配置文件、固件升级、日志管理、用户权限管理等功能，提高了软件的安全性及性能。
　　 最后，对本文所实现的管理软件进行了在线和离线两种状态下的测试，测试结果表明，该管理软件能实现实时监测以及海量数据的处理，符合预期设计的要求。