基于语义分析的改进TF-IDF算法

摘要

传统的TF-IDF算法主要依赖词频,往往忽略词语语义和一些具有重要意义的副词.针对这一问题,提出了一种基于语义分析的改进TF-IDF算法.该方法融入了词语语义来计算词频,改进了反义词语之间的相似度.实验结果表明,该方法在计算句子相似度中能根据语义方向对句中各词语词频进行统计,同时判断整个句子语义方向,与传统算法比较,语句相似度的准确性提高了5.7％.