基于一致性图建模的语义对应方法

摘要

本发明公开了一种基于一致性图建模的语义对应方法，包括步骤：建立源图像与目标图像之间的特征关系，采用图卷积网络对源图像的特征和目标图像的特征进行跨模态更新；对跨模态更新后的源图像特征建立自身特征之间的第一关联关系，对跨模态更新后的目标图像特征建立自身特征之间的第二关联关系，采用图卷积网络对建立第一关联关系后的源图像特征和建立第二关联关系后目标图像特征进行模态内更新；通过一致性损失对模态内更新后的源图像特征和模态内更新后的目标图像特征建立具有循环一致性的特征对应关系，得到源图像到目标图像上的语义对应结果，能够同时捕获整张图片以及图片之间的上下文信息，建立循环一致性的语义对应，适用性强，准确度高。