一种基于改进SNM算法在审判辅助事物的数据清洗方法

摘要

本发明公开了一种基于改进SNM算法在审判辅助事物的数据清洗方法，该数据清洗方法包括以下步骤：S1、根据窗口的影响因素确定窗口的初始值；S2、利用非参数归回方式估算窗口的概率密度，并判定窗口的阈值；S3、对窗口内数据集进行匹配，根据匹配结果判定是否对窗口大小进行调节；S4、根据步长计算公式，确定窗口的调整步长；S5、对窗口进行分词、近似字提取及进行连词，依次赋予权重值为M1、M2及M3，并确认数据是否为相似数据。本发明图形准确率和效率都有明显提升，数据量越大，效果越明显，改进后的算法可以节省40%以上的时间，准确率提高60%。