单目内窥镜图像三维显示方法研究

摘要

在微创手术中,由于人体组织结构复杂,内部器官纹理模糊,梯度复杂,仅借助2D显示平台会增加手术风险,同时也降低了对计算机辅助算法的性能,因此需要对内窥镜图像进行三维显示,此方法可以使医生观察更具有立体感.本文提出一种基于神经网络的三维显示方法.采用腹腔镜图像作为内窥镜图像,由汉姆林中心腹腔镜/内窥镜视频数据集(http://hamlyn.doc.ic.ac.uk/vision/)提供的真实腹腔镜图像,数据集总共包含32400对双目内窥镜图像,其中本文仅采用左目图像作为训练数据集,图片的尺寸为384×192.首先将内窥镜图像传人神经网络模型求取深度信息;有效视差图和左目图像经过三维空间点运算得出右目图;对初始右目图像进行空洞填充优化;分离原图的红色分量与视差结合,再与原图蓝绿分量融合得到三维图像,只要佩戴红蓝眼镜即可观察内窥镜图像三维显示结果.