一种基于多模态分割网络的宫颈病变区域分割方法和装置

摘要

本发明公开了一种基于多模态分割网络的宫颈病变区域分割方法和装置，属于医疗图像处理技术领域，在醋酸图像和碘图像的特征提取过程中采取交叉连接的方式来融合两种图像的特征。为了融合两种图像的特征，将前一个卷积块的醋酸图像特征与下一个卷积块的碘图像进行通道层次的拼接操作，然后碘图像分支再进行后续的特征学习；同理，将前一个卷积块的碘图像特征与下一个卷积块的醋酸图像特征进行拼接操作，然后醋酸图像分支在进行后续的特征学习。这样的交叉连接方式一直持续到第五卷积块，从第五卷积块输出的醋酸图像和碘图像特征基本保持了两种图像的特征。然后，将醋酸图像分支和碘图像分支学习到的特征分别进入FCN模型的分割部分，进行分割预测。