基于最大信息系数的大数据平台在线异常检测方法

摘要

本发明涉及一种基于最大信息系数的大数据平台在线异常检测方法，该方法采用Spark Streaming滑动窗口机制对访问日志进行统计分析，构建用户活跃度模型，进而计算出相邻时间窗口用户活跃度序列的最大信息系数，通过比较最大信息系数与设定的阈值，判定当前时间是否出现网络异常状况。该方法有利于快速、准确且近实时地发现在线场景下的网络异常，实现了大数据平台异常检测分析系统的近实时异常检测功能。