基于语义理解的文档编写辅助系统算法研究与实现

摘要

文档编写辅助系统对于提高文档编写效率具有重要的意义。目前商用的文档编写辅助系统主要侧重文章结构、文章素材或则两者兼备方面的辅助。针对语义理解的文档辅助编写研究很少，智能化不够。为此，本文提出研究基于语义理解的文档编写辅助系统。
　　取得了以下主要研究成果：
　　1)提出了一种基于加权二部图匹配的中文段落相似度计算算法。该算法忽略了段落元素在段落中的位置和顺序，能够处理词语之间同义词替换、句子倒装结构、段落描写某个主题采用倒叙手法等中文段落常见现象。比向量空间模型（VSM）算法在中文段落相似度计算的准确度上有了很大提升。
　　2)在加权二部图匹配算法的基础之上，设计并且实现了符合本系统的语义搜索引擎，把素材的精确推荐由字符串字形上的匹配和词语层次的理解上升到句子、段落层次的综合理解。本文的语义搜索引擎由检索语句预处理模块、语义相似度计算模块、智能构建索引模块、排序模块构成。其中在检索语句预处理模块中，使用基于HMM自主训练分词系统，建立垂直单一领域的专用分词系统。
　　3) 设计并且实现了基于关键词的爬虫程序，可以自动爬取文本素材、语义清洗素材、批量导入mongodb数据库，保证系统的素材数据库能够不断自我更新。
　　4) 文本素材自动分类算法测试平台搭建，编写了一套常用分类算法性能检测平台，通过特征选择和参数调整，一次性对lr，bayes，tree，extratrees，bagging，adboost，svm_nusvc，svm_linear，svm_c_rbf，forest_50，forest_100 等工业上常用分类算法进行性能测试，为系统选择合适的文本分类算法。
　　5) 集成各个功能模块，最终完成了基于语义理解的文档编写辅助系统软件开发工作，达到了设计要求。
　　经测试表明，系统可以对交通领域文档编写提供一定程度上的帮助。在素材的精确推荐上比通用文档编写辅助系统检索准确度高，深层次理解用户意图好。

目录

声明

第一章 绪论

1.1项目研究背景和意义

1.2国内外研究现状

1.3论文工作

1.4本文主要内容及论文结构

第二章文档编写辅助系统框架设计

2.1文档编写辅助系统设计思路

2.2总体设计

2.3系统关键技术

2.4本章小结

第三章语义搜索引擎算法研究与实现

3.1搜索引擎概述

3.2查询预处理算法研究与实现

3.3语义相似度计算算法研究与实现

3.4搜索方案设计

3.5排序方案设计

3.6本章小结

第四章基于语义理解的文档编写辅助系统应用开发

4.1基于B/S架构的界面设计

4.2语义搜索引擎的具体设计

4.3素材更新模块研究

4.4素材持久化保存

4.5系统界面展示

4.6本章小结

第五章文档编写辅助系统功能测试

5.1系统测试

5.2本章小结

总结与展望

总结

展望

参考文献

附录

攻读学位期间取得的研究成果

致谢