机器翻译评价的统计方法研究

摘要

机器翻译质量的评价研究是近年自然语言处理研究的热点之一，对翻译系统的开发有重要的方向指导意义。设计和执行可靠的翻译评价工作与开发翻译系统一样，非常耗时、耗力，而且复杂性也很高。因此，一些研究者开始对翻译质量的评价方法进行深入的研究。 本文的研究内容包括三个主要方面： -是以提高机器翻译评价方法的性能为目标，根据问题的特殊性提出了基于语言模型的翻译评价方法，并通过分数归一化，将自动评分和人工评分进行比较，获得二者的相关系数达到0.79； 二是以BLEU方法为基础，研究了基于实例的翻译评价方法在英汉翻译译文质量评价中的应用，探讨了汉语字模型和词模型在研究汉语时特殊语言问题的影响，并将自动评价和人工评价的结果进行了对比，验证了自动评价方法的有效性； 三是以现有的机器翻译评价方法为基础，研究了这些评价方法在英汉机器翻译质量评价中应用的可行性，并把各种评价方法所获得的系统分数规则化，在此基础上对多种评价方法获得的结果进行了比较，从而进一步验证了自动化机器翻译评价方法的实用性，为今后更为深入的研究打下基础。

目录

文摘

英文文摘

声明

第一章 绪论

1.1研究背景及现状

1.2机器翻译评价的发展

1.3语言模型研究的目的和意义

1.4本文研究的主要内容

第二章 翻译评价方法的性能分析体系

2.1 引言

2.2翻译评价方法的性能分析体系

2.2.1信度

2.2.2效度

2.2.3区分度

2.2.4难度

2.2.5测试集合和效度的关系

2.3 相关系数

2.3.1相关的含义

2.3.2相关的种类

2.3.3相关系数

2.4本章小结

第三章 基于语言模型的翻译评价方法

3.1引言

3.1.1基于语料库统计的语言建模方法概况

3.1.2基于语言单位的上下文统计语言模型

3.2基于N-gram语言模型的翻译评价方法

3.3基于语言模型的机器翻译质量评价实验

3.3.1利用语言模型对翻译结果进行评分

3.3.2人工评价与基于语言模型的翻译评价结果的比较

3.3.3自动评价结果和人工评价结果的相关性分析

3.3.4结果分析

3.4本章小结

第四章 基于实例的BLEU翻译评价方法

4.1 引言

4.2 BLEU方法介绍与实例

4.3基于实例的BLEU翻译质量评价实验

4.3.1利用BLEU方法对翻译结果进行评价

4.3.2人工评价

4.3.3结果分析

4.4本章小结

第五章 多种翻译评价方法的比较分析

5.1 引言

5.2忠实度和可懂度的人工评价

5.3错误类型分析和加权评分

5.4孤立点测试方法

5.5 BLEU/NIST方法

5.6多种翻译评价方法的比较

5.7本章小结

结论

参考文献

攻读硕士学位期间发表学术论文情况

附录1 错误类型及样例

致谢