基于KINECT的实时3D视频通信系统及其实现方法

摘要

本发明基于KINECT的实时3D视频通信系统及其实现方法。利用KINECT摄像头同步采集彩色视频信息、深度视频信息和音频信息，并对深度信息进行滤波优化处理。利用x264对两路视频信息进行压缩处理，利用MP3编码器进行音频压缩，并利用多线程技术实现三路信息的同步采集。利用实时传输协议RTP进行网络传输。系统在接收到三路信息后，对两路视频信息进行解码，获得彩色视频信息和深度视频信息，并进行虚拟视点场景的重构，得到符合人眼视差的左眼场景视频和右眼场景视频。根据双目3D成像原理，将两路视频合成得到3D视频场景，与音频信息同步后利用DirectX播放，构成3D视频会议系统。