一种分词词库更新方法及系统

摘要

本发明提供了一种分词词库更新系统，包括：日志采集模块、日志分析模块、分词评价模块以及分词校正与过滤模块，其中该分词校正和过滤模块包括构造子模块、切分子模块以及过滤子模块。本发明还提供了对应的方法。实施本发明的分词词库更新系统及方法，基于分词业务日志分析，通过对分词业务系统的分词效果进行评价，提取出分词效果不好的分词输入，根据使用参考概率表的Z分词过滤算法对分词效果不好的分词输入进行分词校正和过滤输出新词词组，并将该新词词组更新到分词词库中，不断完善分词词库，解决了分词词库不能适时且适应实际分词应用环境的问题，有效提高分词效果。