基于非对称交叉融合的多光谱图像语义分割方法

摘要

本发明公开了基于非对称交叉融合的多光谱图像语义分割方法。本发明方法首先对多光谱图像进行预处理，输入非对称编码器，获得RGB图像和Thermal图像的特征图及其显著置信度，将输入门控交叉融合模块得到融合特征图；将RGB和Thermal图像输入构建的多光谱显著性感知模块，得到对应显著伪标记；将融合特征图输入由转置卷积组成的解码器；使用随机梯度下降算法优化分割网络模型，对新的多光谱图像依次通过上述步骤获得语义分割结果。本发明方法通过非对称编码器提取多光谱图像特征，可有效减少模型计算开销，还利用门控交叉融合机制自适应地对图像的显著区域融合，有利于对像素点的空间分布关系进行建模，获得更优的语义分割性能。