一种降低端到端语音翻译跨模态跨语言障碍的方法及系统

摘要

本发明属于语音翻译技术领域，公开了一种降低端到端语音翻译跨模态跨语言障碍的方法及系统，所述降低端到端语音翻译跨模态跨语言障碍的系统，包括语音编码器和文本解码器；所述降低端到端语音翻译跨模态跨语言障碍的方法包括：数据集以及数据处理；模型预训练；模型训练；模型解码。本发明提供的降低端到端语音翻译跨模态跨语言障碍的方法，能够使得解码端的每一层都有一个特定的声学表示，在没有引入参数和避免错误传递的情况下达到降低端到端语音翻译跨模态跨语言障碍的目的。本发明的实现以神经网络为基础，提出的降低端到端语音翻译跨模态跨语言障碍的方法旨在不引入额外参数和避免错误传递的情况下提高语音翻译的质量。