数字图像滤波器在立体匹配中的应用

摘要

精确快速地获取三维场景的深度信息是很多三维应用所需的关键技术。随着三维技术的发展，诸如三维表面重建、三维电视、增强现实等应用都对深度图提出了新的要求:在精度上需要更精确的稠密深度信息，在速度上需要更高的深度获取效率。三维电视技术结合了计算机三维动画，真实场景深度获取和虚实融合等技术，舒适的观感需求对高效精确的深度获取技术提出了更高的要求。作者所在的研究团队提出了创新性的“自然三维电视”概念，旨在通过舒适的观感还原真实的三维场景。同时本文作者还提出了使用“视频+深度+增强信息”作为三维内容的表达方式。自然三维电视要求获取真实的场景信息并提取场景对应的深度信息，依靠基于深度图像的绘制方法重构出多个视点图像，实现自然的立体观看感受。而基于深度图像的绘制方法严重依赖于深度图的精确性，且实时的应用场景要求深度获取算法有更高的运算速度。
　　立体匹配技术一直以来是应用最为广泛的深度获取算法之一，由于其被动获取深度的特性和生成稠密深度的能力，立体匹配技术能够适应多种场景的应用。但是由于该技术本身是一个逆向求解的病态问题，问题求解需要在一定的假设下进行。经过多年的发展，通过立体匹配技术获取稠密视差图，进而获取精确稠密的深度图的技术已经获得了长足的发展。这些算法主要分为使用全局优化的全局算法和注重局部匹配代价优化的局部算法。本文在现有算法的基础上对立体匹配算法进行了深入研究，主要创新点和贡献如下:
　　1.本文提出了一种基于数字图像滤波器的局部立体匹配算法框架，实现了滤波器设计和立体匹配算法的紧密结合。算法框架将局部立体匹配中的两个关键问题:匹配代价聚合和视差图后处理统一建模为在匹配代价空间或视差空间中的保持边缘的平滑滤波问题。可以通过设计高效的图像滤波算法提升局部立体匹配算法的精度和速度。
　　2.在基于图像滤波的局部立体匹配框架内，作者提出了一种“双层局部自适应”思想指导下的自适应指导图像滤波器。在原有的指导图像滤波算法基础上，提升了代价滤波的精度，从而提高了匹配算法的整体性能。同时，作者针对算法的并行运算结构特点，在NVIDIACUDA并行计算平台上设计了算法的并行实现。提出了高效“并行积分图像”算法，有效提升了算法在并行平台上的运行效率，达到了半实时视频帧率的处理速度。
　　3.为进一步提升代价滤波的性能，本文基于图像形态学的理论，提出了一种基于正交测地距离权重的全图像指导滤波器。该滤波器能够使用尽可能多的支持像素点支持图像滤波，同时能够有效地保持图像边缘。将该滤波算法应用于匹配代价滤波和视差后处理滤波，都获得了明显的效果提升。作者还根据正交测地距离计算的特点，设计了高效的算法，将原本复杂的滤波操作运算降到了极低的操作数。
　　4.针对视差后处理的关键问题，本文提出了两种后处理滤波方法。使用层级联合双边滤波器对视差图直接处理，可以有效解决遮挡区域和误匹配的视差重计算问题;使用基于正交测地距离权重的全图像指导滤波器在变换后的匹配代价卷上进行滤波，在修复遮挡区域和误匹配视差的同时，还能有效处理大范围低纹理区域的错误匹配。

目录

声明

致谢

摘要

插图

表格

1 绪论

1．1 三维电视技术框架与发展现状

1．2 内容制作对深度获取技术的要求

1．3 基于立体匹配的深度获取算法

1．4 本文的研究内容和成果

1．5 论文组织结构

2 基于图像滤波的局部立体匹配框架

2．1 立体匹配问题定义

2．2 现有立体匹配算法回顾

2．3 本文提出的局部立体匹配框架

2．4 本章小结

3 自适应图像滤波器在代价滤波中的应用

3．1 自适应指导图像滤波

3．2 GPU快速实现

3．3 局部立体匹配应用和实验结果分析

3．4 本章小结

4 使用正交测地距离权重的全图像指导滤波器

4．1 正交测地距离

4．2 线性时间复杂度实现

4．3 正交测地距离权重与双边滤波权重比较

4．4 局部立体匹配应用与实验分析

4．5 本章小结

5 后处理算法中滤波器设计与应用

5．1 遮挡处理与初始视差分类

5．2 基于层级联合双边滤波的视差后处理

5．3 基于正交测地距离权重滤波器的后处理方法

5．4 本章小结

6 总结和展望

参考文献

附录A 自适应指导图像滤波核函数推导

作者简历

攻读博士学位期间参加的科研工作

发表文章目录