GStreamer音视频传输系统研究与实现

摘要

基于GStreamer框架研究实现音视频同步无线传输。以树莓派3B为硬件平台,使用V4L2驱动框架采集视频数据,采用H.264视频编码;通过PulseAudio声音服务器捕获音频数据,使用Opus音频编码,音视频数据按照RTP协议封装,通过UDP协议完成数据传输。测试结果表明:系统WiFi网络音视频同步传输延时可达261 ms,4G网络音视频同步传输延时可达330 ms,仅视频传输分别可达136 ms、206 ms,具有高实时性;传输质量测试采用空间域无参考图像质量评估器和MOS评分标准,图像质量评价优于对比方案40%。系统针对不同应用需求及网络环境,实现多分辨率可选的实时视频采集和WiFi与4G网络自动切换传输,提高使用灵活性和经济性,满足众多场景应用需要,对音视频传输应用有较好参考价值。