ETL优化技术在构建电能质量数据中心中的研究实现

摘要

随着国民经济的快速发展,各行业的电气化程度也越来越高。但许多新兴的电气设备在其运行中向电力系统注入了各种电磁干扰,影响和危害了电力系统的安全运行和设备的正常工作。本文针对这一现象,结合电力专业相关算法,介绍了基于.NET平台电能质量数据中心的设计与实现,并针对电能质量数据处理系统的ETL过程进行优化,对涉及的优化技术以及电能质量数据格式PQDIF进行了深入的研究。通过电能质量数据中心中的分析系统可以从多角度、多层面对电网内电能质量进行客观科学的评估,在保证节能降耗和电网安全可靠、优质经济的运行方面发挥重要作用。

目录

摘要

ABSTRACT

第一章 引言

1.1 课题研究的背景和意义

1.2 ETL技术的提出

1.3 PQDIF的提出

1.4 本论文主要完成的工作

第二章 ETL技术概述

2.1 商业智能介绍

2.1.1 商业智能的发展

2.1.2 商业智能的架构

2.1.3 商业智能的特点

2.2 ETL技术环节介绍

2.2.1 数据的抽取

2.2.2 数据的清洗转换

2.2.3 ETL日志、警告发送

2.3 小结

第三章 电能质量数据中心体系结构的设计

3.1 电能质量数据中心体系结构设计方案

3.1.1 电能质量现场监测终端

3.1.2 电能质量数据处理系统

3.1.3 电能质量数据分析系统

3.2 电能质量数据中心设计思路和要求

3.2.1 系统设计思路

3.2.2 技术要求

3.3 系统结构设计

3.3.1 系统运行环境

3.3.2 基于Web的三层体系结构

3.4 数据库与Web服务器

3.4.1 数据库设计与开发

3.4.2 Web服务器及开发环境

3.5 小结

第四章 电能质量数据ETL优化

4.1 电能质量数据抽取

4.1.1 PQDIF的引入

4.1.2 PQDIF的物理结构

4.1.3 PQDIF的逻辑结构

4.1.4 PQDIF解析方法设计

4.1.5 PQDIF解析实现

4.2 电能质量数据优化

4.2.1 业务数据优化清洗

4.2.2 数据压缩处理

4.3 电能质量数据中心的性能优化

4.3.1 电能质量数据的ETL过程

4.3.2 存储过程实现数据导入

4.3.3 数据预处理统计

4.4 电能质量分析数据的展示

4.4.1 谐波与电压暂降分析结果展示

4.4.2 综合评估结果展示

4.4.3 系统分析报告展示

4.5 小结

第五章 结论

5.1 论文工作成果

5.2 进一步的研究工作展望

参考文献

致谢

在学期间发表的学术论文和参加科研情况