一种基于实时历史数据库的数据清洗方法

摘要

一种基于实时历史数据库的数据清洗方法，适用于一切使用实时历史数据库存储数据的领域，本申请以电厂信息化为应用背景，以过程数据为基础，以优良时间段为目标，设计并实现了一种实用性较强的数据清洗方法。该方法涉及到实时历史数据库测点的创建、过程数据的采集、实时库数据的查询、数据特性分析，最后提出了一种以阈值和倍率为参数的横向清洗算法，将不同采集周期过程数据进行了描述，最终得到了过程控制数据采集的坏时间段和优良时间段，清洗算法清晰，理论依据严谨，软件执行效率较高。该清洗方法已经在数据挖掘等系统中得到了应用。