一种实现指代消解的方法及装置

摘要

本文公开了一种实现指代消解的方法及装置。所述方法包括：向语言模型输入句子样本，对语言模型进行无监督预训练：随机掩盖句子样本的一部分原文，训练语言模型通过上下文的信息预测被掩盖的原文部分；所述语言模型是基于神经网络的NLP模型；对经过无监督预训练的语言模型进行针对指代消解任务的有监督训练：向语言模型输入句子样本以及照应语的信息，训练语言模型预测照应语在句子中指代的先行语，为语言模型的输出添加指示先行语信息的输出标签；向经过有监督训练的语言模型输入句子和照应语的信息，利用语言模型预测所述照应语在句子中指代的先行语。本文的技术方案能通过神经网络机器学习代替大量的语言学特征设计以实现指代消解。