一种基于子空间混合超图学习的交叉模态检索方法

摘要

一种基于子空间混合超图学习的交叉模态检索方法，基于典型相关性分析的交叉模态公共子空间学习；通过公共子空间的映射来计算模态内部和模态之间的相似度；通过不同模态内部和模态之间的相似度计算混合关系矩阵；通过对关系矩阵的提炼构建混合超图模型；最后采用超图学习进行交叉模态检索和样例排序。本发明实例针对交叉模态的异构差异性，以及样本之间的高阶关系，将超图模型结合交叉模态公共子空间学习，应用到交叉模态检索中，使模型能够同时考虑模态间的相似度和模态内部的相似度，同时兼顾多个样本之间的高阶关系，提高最终的交叉模态检索的查准率和查全率。本发明有效地提高了交叉模态检索的性能，能大大提高交叉模态检索的准确率和召回率。