一种基于关系模型的医学报告生成模型及其生成方法

摘要

本发明公开了一种基于关系模型的医学报告生成模型及其生成方法，所述模型包括：深度卷积网络，用于对异常术语进行分类并抽取视觉特征，并将其输入分为两级的双向长短期记忆网络层进行注意力操作，在每级双向长短期记忆网络层后接入全连接层以分别负责选择模板和单词；分级递归神经网络，包括2层双向长短期记忆网络层，其顶层双向长短期记忆网络层通过注意力操作，再连接全连接层选择正确的模板，低层双向长短期记忆网络层介入顶层的信息并连接全连接层选择正确的单词；报告生成模块，包括用于预测异常句子的模板解码器和用于正常句子生成的单词解码器，以根据所述分级递归神经网络的决策选择对当前句子生成使用模板检索或句子生成，并将所有来自检索或自动生成的句子最终连接起来形成医学报告。