基于架构短句约束向量和双重视觉关注机制的图像描述生成方法

摘要

本发明公开一种基于架构短句约束向量和双重视觉关注机制的图像描述生成方法，通过对海量已标注文本描述的图像训练得到一个自动描述图像视觉内容信息的语义模型，其由三部分：架构短句生成模型，双重视觉关注机制和约束化语言模型。并实现对任意输入测试图像，自动生成文本描述。本发明能够有效地建立文本描述中单词和图像的联系，对基于语义上，图像显著目标或场景间的描述有很好的表现。