情感语音合成中的韵律研究

摘要

本文主要研究了情感语音的声学特性，情感语音合成中的韵律预测方法以及情感语音合成中韵律预测的研究。本文分为三个部分：第一部分介绍了情感语音的概念，详细讨论了情感音库的录制问题，并介绍了几个目前国际上比较成熟的情感音库，接着，本文简单给出了一些其他研究人员总结的情感语音的声学特性，以及常见的情感语音合成方法；第二部分介绍了语音合成中的韵律预测的方法，本文分别对统计模型的方法，神经网络的方法，数据挖掘的方法，以及对汉语韵律模型简要介绍；第三部分详细研究了在现有资源基础上情感语音音库的录制方法，语音合成中韵律预测方法，并给出了基于SFC韵律模型的情感语音合成器的实现系统。第四部分回顾了全文的内容，并对未来情感语音方面的研究进行了展望。

目录

摘要

第一章情感语音及其声学特性

1.1.情感语音的概念

1.2.情感音库的录制及代表音库介绍

1.2.1情感音库录制需要考虑的问题

1.2.2对情感语音的听辨实验

1.2.3代表音库

1.3.情感语音的声学特征

1.3.1情感语音的韵律特征

1.3.2情感语音的频谱参数

1.3.3和上下文关系方面

第二章语音合成中的韵律预测

2.1规则驱动的方法

2.2数据驱动的方法

2.2.1统计模型

2.2.2神经网络韵律预测

2.2.3基于数据挖掘的韵律预测

2.3汉语韵律模型

2.3.1 Target基频模型

2.3.2 Fujisaki基频模型

2.3.3 SOP时长模型

2.3.4 SFC韵律模型

2.4情感语音合成方法

第三章情感语音的韵律预测研究

3.1情感音库的制作

3.1.1情感文本设计

3.1.2情感语音录制及音库制作

3.2基于规则的韵律预测

3.2.1发音人M1的韵律参数分析

3.2.2发音人M3的韵律参数分析

3.2.3情感语音的短时平均能量分析

3.2.4基于规则的韵律调整

3.2.5调整实验结果及总结

3.3 SFC韵律模型训练及预测的原理

3.4用于情感语音合成的SFC模型设计及训练

3.4.1直接预测的方法

3.4.2直接预测模型的层次分析

3.4.3直接预测模型的对比分析

3.4.4发音人对情感语音的表达方式

3.4.5从中立语音韵律转换的方法

3.5情感语音合成器及效果评测

第四章结束语

参考文献

致谢

附录1：独研期间的研究经历

附录2：论文发表