基于MapReduce框架的电力大数据增量式属性约简方法可行性分析

摘要

对于大数据时代中电网数据量大、速度快、类型多的特点,传统属性约简方法已经无法满足大数据预处理需求,以此提出基于MapReduce框架的电力大数据属性约简方法.利用某光伏发电系统对属性约简的求和算法进行分析,以传统算法改进属性约简算法,从而有效解决大数据环境下计算过程中的效率问题.改进的大数据属性约简算法是以实际需求开展,对复杂任务进行有效处理,结合实际需求解决问题,最后对方法进行实验分析.通过实验结果表示,文中分析算法具有良好的处理能力与可行性,并且能够提高属性约简效率.