一种基于多任务学习的多语种识别模型的构建和训练方法

摘要

本发明涉及一种多任务的语种识别的模型构建方法和训练方法，包括：使用无监督预训练方式对wav2vec模型进行第一次预训练；根据包括语种识别和数据有效识别在内的任务要求建立包含多语种样本数据的训练样本集；采用训练样本集中的样本数据对第一次预训练好的wav2vec模型再进行第二次预训练；针对于所述任务要求对第二次预训练好的wav2vec模型进行适应性微调后构建出最终的多语种识别模型；再次采用训练样本集中样本数据对所述多语种识别模型进行训练，使多语种识别模型能够同时识别输入语音数据的语种和话音有效性。本发明实现了对语种识别和有效话音识别两种任务的同时识别，提高了语种识别的准确率和识别效率。