一种基于BERT的电网调度语音识别语言模型构建方法

摘要

本发明涉及电网调度语音识别领域，尤其涉及一种基于BERT的电网调度语音识别语言模型构建方法，包括：提取电网调度语句的字粒度语义特征；提取电网调度语句的关键字特征；提取电网调度语句的命名实体特征；对输入BERT原始模型的电网调度语句以字为单元进行切分以提取位置特征，基于语义特征、关键字特征、命名实体特征以及位置特征对BERT原始模型进行训练得到电网调度语音识别语言模型。本发明的有益效果：根据电网调度语言特点和调度语音识别应用场景，对BERT模型的调度语句输入特征向量和输出概率预测方法进行改进，实现结合调度语言特征的电网调度语句合理性判断，且相比于其他常用的语言模型在电网调度语音识别方面有更高的准确性。