一种基于辅助表示融合的非自回归神经机器翻译方法

摘要

本发明公开一种基于辅助表示融合的非自回归神经机器翻译方法，步骤为：构造自回归神经机器翻译模型；构建训练平行语料，训练一个只有一层解码器的模型；构造非自回归神经机器翻译模型；将自回归神经机器翻译模型解码器最顶层的前馈神经网络后的输出与非自回归神经机器翻译模型编码器的顶层表示进行加权融合，作为非自回归神经机器翻译模型解码器的输入；编码器提取源语句子信息，解码器根据该源语句子信息来预测对应的目标语句子；完成非自回归神经机器翻译模型的训练；将源语句子送入非自回归神经机器翻译模型中，解码出不同长度的翻译结果。本发明结合自回归模型和非自回归模型的优点，在损失了较小性能的情况下，能够获得7～9倍的速度提升。