基于大数据分析的海量数据离群点检测方法

摘要

由于传统的海量数据离群点检测方法,在进行海量数据离群点检测时存在计算不准确、检测精度低等问题,笔者提出基于大数据分析的海量数据离群点检测方法:建立R2-tree大数据结构离群点检测树,不断地调整大数据结构离群点数目;计算海量数据离群点检测阈值;寻找与其他数据样本一般行为不同或特征差异性大的点,完成海量数据离群点检测。实验结果表明,在对相同个数的数据进行检测时,设计方法正确检测到海量数据离群点的个数高于传统方法,能够实现对海量数据离群点的精准检测。