基于特征空间多分类对抗机制的红外可见光图像融合方法

摘要

本发明提出了一种基于特征空间多分类对抗机制的红外可见光图像融合方法。本发明所提出的方法引入空间注意力机制，同时使用密集连接和残差连接来构建高性能编码器网络实现特征提取；引入通道注意力机制，同时使用多尺度卷积来构建高性能译码器网络实现图像重建。将融合策略网络化，引入多分类生成对抗机制使融合特征同时符合红外与可见光两种模态的概率分布，从而构建高性能的深度融合策略。最终的红外与可见光图像融合网络由训练好的编码器、特征融合网络以及译码器级联而成，生成高质量的融合结果。相较于现存方法，本发明所提出的方法可解释性好、融合速度快、适用范围广。