基于粒子群优化BP神经网络的重复记录检测方法

摘要

针对目前重复记录检测方法对大规模检测效率低等问题,提出一种粒子群优化BP神经网络的重复记录检测方法。充分利用了神经网络的非线性映射和粒子群算法的全局优化特性,将基于学习的思想和进化的思想应用到重复记录检测中,避开了传统方法计算属性权重的问题。理论分析和实验表明,该方法不仅具有好的检测精度,而且具有很好的时间效率,能够有效地解决大数据量的相似重复记录检测问题。