实时远程多媒体教育系统的研究与软件实现

摘要

该文深入讨论和研究了实时远程多媒体教育系统中视音频信号的实时处理技术与实时传输技术,并进行了软件实现.整个系统服务器端程序运行在Linux环境下,客户端程序运行在Windows环境下,主要分为三个部分:视频采集、编解码与播放;音频采集、编解码与播放;视音频数据的网络实时传输.其中视频编解码遵循ITU-T H.263协议,音频编解码基于ITU-T G.723协议,视音频数据的实时传输主要依据RTP协议.该文首先对视音频信号的编解码方法进行了讨论,在对视音频压缩协议H.263和G.723进行分析和软件实现的基础上,根据编解码的特点,利用MMX技术,提出了优化的算法.优化以后的算法提高了程序运行效率,完全可以满足软件实现实时编解码的需要.然后研究了如何用软件的方法实现视音频数据的采集与播放.该文还重点讨论了视音频数据的同步问题,即唇音同步问题,提出了一套同步的方法,试验证明该方法有较好的效果.最后在对RTP协议进行深入分析的基础上,软件实现了视音频数据的实时传输,并讨论了一种基于RTP协议的带宽控制算法来控制视音频数据的传输带宽.另外,该文还提出了一些加强整个系统功能的辅助模块方案,并进行了软件实现.

目录

文摘

英文文摘

第一章概述

1.1引言

1.2实时远程多媒体教育系统的功能特点

1.3实时远程多媒体教育系统的软件组成及工作原理

1.4论文背景和主要工作及安排

第二章视音频压缩协议H.263、G.723与实时传输协议RTP

2.1视频压缩协议H.263

2.1.1 H.263的基本框架

2.1.2 H.263的四个可选模式

2.2音频压缩协议G.723

2.2.1 G.723简介

2.2.2编码器的工作原理

2.2.3解码器的工作原理

2.3实时传输协议RTP

2.3.1 RTP报文格式

2.3.2 RTCP报文

2.3.3 RTP工作过程

2.3.4基于RTP的传输控制机制

第三章视音频信号的软件实时处理与同步

3.1视频信号的软件实时处理与优化

3.1.1视频信号的采集

3.1.2视频的软件编解码

3.1.3视频的显示

3.1.4视频编解码的优化

3.2音频信号的软件实时处理与优化

3.2.1音频信号的采集

3.2.2音频的软件编解码

3.2.3音频的播放

3.2.4音频编解码的优化

3.3视音频信号的同步处理

3.3.1基于反馈的同步机制

3.3.2基于RTP协议的同步机制

3.3.3应用程序的强制同步机制

第四章视音频数据的实时传输

4.1视音频实时传输模块的总体结构与流程

4.2 RTP包和RTCP包的结构

4.3服务器端RTP模块的设计与流程

4.4客户端RTP模块的设计与流程

4.5基于RTP的带宽控制算法

第五章实时远程多媒体教育系统的整体实现

5.1系统结构

5.2 Linux的采用

5.3进程间的通信

5.4辅助模块的实现

5.4.1静态文件传输模块

5.4.2视频点播与快速浏览模块

5.5系统实现结果

结论

致谢

参考文献

学位论文知识产权声明书及学位论文原创性声明