基于未登录词识别的汉盲翻译系统研究

摘要

随着互联网信息的发展，阿人应摆脱传统盲文书籍的束缚，享受丰富多彩的信息世界。然而，H前汉字盲文的信息化处理程度较低，肓人能够接触到的阅读材料较少。为帮助盲人尽早实现信息无障碍获墩，本文设计实现了一款带有未登录词自动识别功能的汉语盲文翻译系统，其中包含未登录词识别、中文分词连写、字音转换、拼音-ASCII码转换、盲文点序生成等模块，提供现行盲文和通用盲文两套翻译模式，额外支持解码标准BRF文件，可以帮助用户快捷方便地获取盲文文本，搭配使用盲文显示装置，大大扩展了盲人的信息获取渠道。本文主要包含以下部分工作:　　对盲文分词连写影响最大的是未登录词问题，结合独立词内部凝聚程度和外部自由程度，将改进PMI算法和最小邻接熵相结合，设计实现了基于改进PMI和最小邻接熵结合策略的未登录词识别算法，该方法在未登录词识别性能上有一定的提升。将识别得到的未登录词形成个性化用户词典，用于改进现有的Jieba分词系统，改进后的Jieba分词系统性能优于隐马尔科夫模型算法的分词系统。这证明了未登录词识别算法的有效性，且通过加载个性化用户词典的方式能够改善汉语盲文分词连写效果。　　利用第三方模块初步获取汉字的拼音字符串，对拼音字符串进行声母、韵母、声调的切分。分析总结盲文拼读体系和汉字拼音的区别，对5种发音情形设计了相应的拼音修正处理算法。对修正处理后的声母、韵母、声调分别匹配盲文ASCu码，最后将ASCII码转换为自文点序。　　对设计的基于未登录词识别的汉盲翻译算法进行开发实现，整合统一各个功能，形成完整的基于未登录词识别的汉盲翻译系统。设计开发了相应的人机交互界面，方便用户使用。　　对汉盲翻译系统进行多维度测试，包括系统功能测试、汉盲翻译算法性能测试，以及翻译结果文件的应刚测试。将本系统的翻译结果和中国盲文数字平台的翻译结果进行比对，验证该系统具有较高的翻译准确率。统计系统翻译转换时间，计算得出该系统具有较快的翻译转换速度，整体具备良好的实用性。经盲文二号家校核，翻译结果文件在盲文显示设备上同样具有较好的实际表现。

目录

声明

摘要

1．1论文研究的背景和意义

1．2汉语盲文体系介绍

1．3国内外研究现状

1．3．1汉盲翻译系统研究现状

1．3．2未登录词识别研究现状

1．4论文研究的主要内容

1．4．1论文研究的重难点

1．4．2论文研究的创新点

1．5论文的组织结构安排

2．1引言

2．2结合策略的未登录词识别算法

2．2．1独立词成词维度设计

2．2．2未登录词识别算法流程

2．3未登录词自动识别实验

2．3．1实验数据

2．3．2文本预处理和识别结果示例

2．3．3未登录词识别算法性能评测

2．4文本的分词处理算法

2．4．1现有分词算法分析

2．4．2改进Jieba分词系统的处理算法

2．4．3改进Jieba分词系统的性能评测

2．5本章小结

3．1引言

3．2面向汉盲翻译的汉字文本拼音化

3．2．1汉字拼音转换

3．2．2汉字拼音字符串的切分算法设计

3．2．3面向汉盲翻译的拼音修正算法设计

3．3盲文AscII码化

3．3．1拼音的盲文AsclI码化

3．3．2特殊符号的盲文AScIl码化

3．4现行盲文和通用盲文各阶段的处理区别

3．5盲文点序化

3．6本章小节

4．1引言

4．2系统开发环境

4．3基于未登录词识别的汉盲翻译系统整体分析

4．3．1基于未登录词识别的汉盲翻译系统整体架构

4．3．2基于未登录词识别的汉盲翻译系统模块分析

4．4基于未登录词识别的汉盲翻译系统实现

4．4．1未登录词识别的实现步骤

4．4．2汉盲翻译的实现框架

4．5基于未登录词识别的汉盲翻译系统功能整合

4．6本章小结

5．1引言

5．2汉盲翻译系统功能测试

5．2．1汉盲翻译系统的人机交互框架

5．2．2汉盲翻译系统的界面黑盒测试

5．2．3汉盲翻译系统的异常字符处理测试

5．3汉盲翻译系统性能测试

5．3．1实验平台

5．3．2实验数据

5．3．3实验过程

5．3．4实验结果和分析

5．4汉盲翻译结果的应用测试

5．4．1翻译结果文件应用原理

5．4．2翻译结果文件应用测试

5．5本章小结

6．1总结

6．2展望

参考文献

附录

攻读硕士学位期间的研究成果和项目参与情况

致谢