一种基于特定模态特征补偿的跨模态行人重识别方法

摘要

一种基于特定模态特征补偿的跨模态行人重识别方法，收集可见光行人图像作为可见光域训练图像，收集红外行人图像作为红外域训练图像；利用生成对抗网络将可见光域和红外域的行人图像进行风格转换，生成跨模态的配对行人图像；获取配对行人图像间的融合特征作为行人图像的表示特征用于行人重识别。本发明结合多模态图像风格转换网络和行人重识别，将一种模态的原始图像特征和其对应生成另一种模态图像特征融合作为行人图像特征；通过计算行人图像特征的欧式距离，根据欧式距离得到不同行人图像匹配的结果。本发明改善了生成图像的质量和配对图像融合特征的判别力，极大地提高了跨模态行人重识别任务的精度。