基于自然语言的标识单元归并方法、装置、设备和介质

摘要

本申请实施例提供基于自然语言的标识单元归并方法、装置、设备和介质，方法包括：获取多层自然语言处理神经网络模型中的神经层输出的多个标识单元，所述标识单元为输入多层自然语言处理神经网络模型的语料信息对应的中间输出信息；获取所述多个标识单元之间的相似度；根据所述相似度对所述多个标识单元进行归并。与现有技术不同的是，本申请实施例对标识单元进行合并，这是考虑到文字不同于图像，其元素之间的关系并不依赖空间近邻关系，保持原序列的空间关系不一定是必要的。基于上述实施方式，能够减少计算开销和存储开销。