多视点自由立体视频采集系统校正方案研究

摘要

自由立体电视作为多视点成像最重要的应用,为用户提供了从多角度观看场景的能力,增强了传统媒体提供给用户的体验,因此受到越来越多泛的关注。本文首先介绍了自由视点电视技术及国内外的主要发展状况,分析了多视点自由立体视频采集系统目前在采集、显示与感知方面存在的问题,由此提出了一种能使多视点立体图像失真最小的校正方法。利用本文提出的校正算法,能较好地校正立体图像对之间存在的旋转、垂直和水平方向的误差,获得理想的图像。最后,在经过校正的多视点立体图像的基础上,通过块视差匹配以及稀疏视差匹配的方法确定立体图像的视差范围,并根据自由立体显示器的视差范围,进行视差范围的映射以及零视差位置的重新调整。本文的主要工作和取得主要成果如下:
　　1、提出了一种新的针对平行配置模式的多摄像机阵列校正方法。该方法考虑在尽量减少图像失真的前提下,兼顾了系统实时采集的要求。具体做法是:先对平行阵列摄像机进行标定得到摄像机矩阵,再对摄像机矩阵的内参数和外参数分别使用不同的校正方法得到平行摄像机阵列理想的内、外参数;然后将原来的摄像机位置重投影到新的空间位置,从而实现对平行摄像机阵列采集获得的多视点立体图像的校正。该方法以尽可能地减小图像的几何失真为标准,能为后续的处理步骤做好准备。
　　2、提出了一种新的针对平行配置模式的多摄像机阵列的零视差校正方法。该方法以立体图像舒适观看为前提,充分考虑了人眼、摄像机和显示器在观看舒适时的不同的视差特性,摒弃了以前仅根据平均正负视差范围进行零视差校正的做法,采用了更符合舒适观看的零视差映射方法,为多摄像机阵列的零视差校正建立一个参考准则;同时该方法还充分考虑了实时性的需要,在精度和速度间进行权衡,在保证零视差校正的精度基础上,达到了系统实时的要求。
　　实验结果表明:本文所提出的方法可以实现对采集中的多视点立体视频进行实时的几何校正和零视差校正,并能支持八视点自由立体视频的实时显示。

目录

封面

声明

中文摘要

英文摘要

目录

第一章 绪论

1.1引言

1.2课题背景及研究意义

1.3国内外研究现状

1.4论文的研究内容及结构

第二章 立体视觉原理

2.1引言

2.2眼睛的结构和成像机理

2.3视觉深度线索

2.4双眼融像

2.5本章小结

第三章 立体采集和显示系统存在的问题

3.1引言

3.2摄像机模型与显示模型的视差关系

3.3立体摄像机采集存在的问题

3.4立体图像对视差的特点对立体显示的影响

3.5立体显示技术与人眼视觉的问题

3.6本章小结

第四章 多视点立体图像的几何校正

4.1引言

4.2摄像机模型[38]

4.3摄像机标定

4.4理想校正条件

4.5多视点摄像机校正算法

4.6实验结果和数据分析

4.7本章小结

第五章 多视点立体图像的零视差校正

5.1引言

5.2显示器视差主观测试

5.3零视差校正的算法实现过程

5.4实验结果

5.5本章小结

第六章 总结与展望

6.1本文工作总结

6.2进一步的工作

参考文献

发表论文和参加科研情况说明

致谢