基于大数据技术的电力数据质量评估数据框架研究

摘要

在大数据时代,大多数应用都是由数据驱动的。如果能提高数据质量,大数据应用的有效性和可靠性也能得到提高。在电力行业中,不断积累的电力数据越来越多,并在此基础上开发了许多电力应用。在我国,电力大数据在规模、结构、格式、评估要求等方面都具有一定的特殊性,传统的大数据评估框架无法直接应用。因此,提出了一个电力数据质量评估的大数据框架。该框架增加了基于灰色理论的量化评价模块,并给出一般性的数据指标质量计算公式。本框架可以同时积累实时数据和历史数据,为电力大数据评估提供集成计算环境,支持不同类型数据的存储。本文研究结果为其他具有相似特征的大数据应用亦提供了一个有价值的框架。