一种基于深度张量融合的多模态地基云图识别方法

摘要

本发明实施例公开了一种基于深度张量融合的多模态地基云图识别方法，该方法包括：对输入地基云样本进行预处理，得到深度张量融合网络输入；将该输入转移到深度张量融合网络训练模型中，训练得到深度张量融合网络；提取每个输入地基云样本的融合特征表示；训练支持向量机分类器，得到地基云分类模型；获取测试输入地基云样本的融合特征表示，输入至地基云分类模型中得到分类结果。本发明具有联合学习地基云视觉信息与多模态信息的能力，能够在张量级别上融合视觉信息与多模态信息同时保持视觉信息的空间内容，充分利用视觉信息与多模态信息的互补信息，有效挖掘两者的相关性，提取更高辨别性的融合特征，提高地基云分类的正确率。