基于云平台的分布式新能源监控数据分析方法研究

摘要

为了及时并准确地对新能源监控数据进行采集、存储以及分析,研究了基于云平台的分布式新能源监控数据分析设计,设计了一种基于云平台的Hadoop的新能源系统监控数据并行采集和分布式存储的计算构架,分析了云平台的体系构成,完成了基于HBase数据库的并行数据采集系统的模块设计、基于SCAD系统的结构化数据存储模块设计、基于MapReduce方法的分布式数据处理方案设计,解决了数据量剧增导致的存储空间不足问题以及各级单位数据交互难的问题,实现了电网检测数据的并行写入,提高了数据采集效率以及异构数据的统一存储,研究为实现高效、统一、安全的新能源监控数据的处理系统提供一定借鉴意义.