一种知识图谱嵌入注意力机制的弱标注哈希图像检索架构

摘要

本发明公开了一种知识图谱嵌入注意力机制的弱标注哈希图像检索的架构，通该架构将特征学习、哈希学习、知识图谱嵌入、跨模态特征融合集成到了一个端到端的图像检索架构当中，包括图像视觉特征提取网络、文本特征提取模型、将图像特征与文本特征执行交叉关注的解码器、嵌入自注意力层的噪声遮罩矩阵、生成紧凑语义的哈希层、单模态视觉模型和用于将多模态模型性的能迁移至单模态模型的知识蒸馏机制。该架构对弱标注环境下的图像检索性能具有一定的提升。