WebRTC

摘要： The mixed reality conference system proposed in this paper is a robust,real-time video conference application software that makes up for the simple interaction and lack of immersion and realism of traditional video conference,which realizes the entire process of holographic video conference from client to cloud to the client.This paper mainly focuses on designing and implementing a video conference system based on AI segmentation technology and mixed reality.Several mixed reality conference system components are discussed,including data collection,data transmission,processing,and mixed reality presentation.The data layer is mainly used for data collection,integration,and video and audio codecs.The network layer uses Web-RTC to realize peer-to-peer data communication.The data processing layer is the core part of the system,mainly for human video matting and human-computer interaction,which is the key to realizing mixed reality conferences and improving the interactive experience.The presentation layer explicitly includes the login interface of the mixed reality conference system,the presentation of real-time matting of human subjects,and the presentation objects.With the mixed reality conference system,conference participants in different places can see each other in real-time in their mixed reality scene and share presentation content and 3D models based on mixed reality technology to have a more interactive and immersive experience.

摘要： 针对现有高速公路联勤联动机制不完善以及高速公路运营系统中存在着沟通效率低下、不能有效反馈现场情况、不能快速对司机发出通知等问题,文章通过介绍和分析云语音、云短信、WebRTC、智能即时通信机器人、HTML5等技术的简单原理及功能,将多种技术有机组合起来,为联勤联动构建一个高效的沟通系统。该系统在四川某高速公路的具体应用中显著提高了高速公路多个管理部门联合执法和应急处置的工作效率。

摘要： 本文对不同协议在直播分发中的优缺点进行了比较,并对WebRTC协议和HLS协议在直播视频中的时延影响进行了对照试验,结果显示,新媒体直播视频分发中,WebRTC协议拥有比HLS协议更好的优势。但目前WebRTC协议实践反馈及相关数据尚不充分,仍需进一步分析优化。

摘要： 本文主要介绍了湖南广播电视台为湖南省2022年重大项目集中开工活动直播提供的快速部署技术方案。该方案将自主开发的云Saa S服务平台M-TECH的云连线、云演播室系统,结合Web RTC和SRT传输协议、线下定制网关设备应用于此次活动,解决了云Saa S应用与广播电视系统的对接、现场扩声与消除回声等技术难点,在短时间内实现了各会场间高质量低延时视频连线的需求。

摘要： 针对目前大部分通信软件存在的跨平台性差、跨终端性差、采用私有协议、无法与广电系统有效融合等不足,本台设计并实现了一种基于WebRTC技术的低延时视音频通信方案,可实现与演播室的双向视频互动。本文先分析了低延时通讯与演播室系统相结合的关键技术,然后介绍了低延时技术在演播室节目互动中的几种应用方案,可供业界同行参考。

摘要： 语音前端处理是智能语音机器人中一项关键的技术.传统的语音前端处理方法大多通过DSP来实现,大大增加系统复杂度和研发成本.基于WebRTC语音库,采用SRP-PHAT声音定位算法实现语音前端处理系统可以解决上述问题.该系统使用C++语言实现,可以直接部署在普通通用处理器或嵌入式ARM处理器中.经过实际功能及性能测试,该系统可以满足智能语音机器人对前端语音处理的要求.

摘要： 本文介绍了江西广播电视台融媒体报道团队应用5G、XR、WebRTC等新技术,突破空间距离,实现异地同屏面对面"云访谈"的经验,对系统总体规划、技术架构和实现进行了分析.

摘要： 目前以云端形式服务平台的日趋成熟,为新媒体业务提供了完整的视频采样、编码、推流、转码、分发、拉流、解码和播出等解决方案,为直播提供了各种场景的接口服务,极大程度上有效解决了直播中的技术难点及网络细节问题.传统广播电视系统结合新媒体互动技术实现多端、多地实时互动的创新应用,给新媒体和传统媒体带来了新的直播形式和效果,大大提升了直播的多样性和互动性,也必将成为今后互联网化直播的重要技术手段.

摘要： 在5G、大数据、云计算技术的支持下,电视节目制播转向"云录制","云录制"实现了轻量、迅速、高效的内容生产方式,揭开了各大电视台节目创新生产和制作的面纱.本文以《630网络公开课》节目为例介绍了新闻类节目制作运用"云录制"形式的技术方案探索和节目呈现效果,详细叙述了云录制技术搭建方案,包括低延时通话技术、多通道录制技术和局域网超高清视频传输技术,最后就云录制过程中所遇到的问题提出了解决方案与建议.

摘要： 观众对传媒内容有着越来越强烈的交互需求,WebRTC提供的实时通信能力可以支持任一观众即时连麦加入到电视节目中,将连麦互动的画面合成做旁路直播,可以达到低成本的超大规模分发能力.

摘要： 在一实施例中，第一UE上的第一WebRTC代理模块接收来自所述第一UE上的第一WebRTC多媒体客户端应用的复用流。所述第一WebRTC代理模块解复用成至少第一和第二解复用流。所述第一WebRTC代理模块经具有QoS的第一组链路将所述第一解复用流发送至第二UE上的第二WebRTC代理模块，以及在第二组链路上将第二解复用流发送至所述第二WebRTC代理模块。所述第二WebRTC代理模块重新复用所述第一和第二解复用流以获得原始版本或压缩版本的复用流，然后将重新复用的流递送至所述第二UE上的第二WebRTC多媒体客户端应用。

摘要： 本发明涉及一种计算机装置(10)以及一种由计算机实现的、用于从WebRTC服务器向WebRTC客户端安全且动态地重新加载附加软件(SW)的方法，其特征在于，WebRTC数据通道被用来传输软件(SW)。

摘要： 本申请涉及经由相应WebRTC数据信道验证WebRTC媒体信道私密性的方法、系统。在一个实施例中，一种用于验证WebRTC媒体信道的私密性的方法包括利用密钥设置材料建立第一与第二WebRTC客户端之间的WebRTC媒体信道。该方法还包括利用该密钥设置材料建立第一与第二WebRTC客户端之间的相应的WebRTC数据信道，并且在WebRTC数据信道中协商密码密钥交换。该方法还包括基于WebRTC数据信道中的密码密钥交换生成第一和第二短认证串(SAS)。该方法还包括显示第一SAS和第二SAS，以使得第一SAS与第二SAS之间的不匹配指示出中间人(MitM)攻击者的存在。

摘要： 在一实施例中，第一UE上的第一WebRTC代理模块接收来自所述第一UE上的第一WebRTC多媒体客户端应用的复用流。所述第一WebRTC代理模块解复用成至少第一和第二解复用流。所述第一WebRTC代理模块经具有QoS的第一组链路将所述第一解复用流发送至第二UE上的第二WebRTC代理模块，以及在第二组链路上将第二解复用流发送至所述第二WebRTC代理模块。所述第二WebRTC代理模块重新复用所述第一和第二解复用流以获得原始版本或压缩版本的复用流，然后将重新复用的流递送至所述第二UE上的第二WebRTC多媒体客户端应用。

摘要： 本发明涉及一种计算机装置(10)以及一种由计算机实现的、用于从WebRTC服务器向WebRTC客户端安全且动态地重新加载附加软件(SW)的方法，其特征在于，WebRTC数据通道被用来传输软件(SW)。

摘要： 本申请涉及经由相应WebRTC数据信道验证WebRTC媒体信道私密性的方法、系统。在一个实施例中，一种用于验证WebRTC媒体信道的私密性的方法包括利用密钥设置材料建立第一与第二WebRTC客户端之间的WebRTC媒体信道。该方法还包括利用该密钥设置材料建立第一与第二WebRTC客户端之间的相应的WebRTC数据信道，并且在WebRTC数据信道中协商密码密钥交换。该方法还包括基于WebRTC数据信道中的密码密钥交换生成第一和第二短认证串(SAS)。该方法还包括显示第一SAS和第二SAS，以使得第一SAS与第二SAS之间的不匹配指示出中间人(MitM)攻击者的存在。

摘要： 本发明公开了一种基于WEBRTC技术的多级指挥调度系统及方法，涉及音视频通信技术领域，为解决现有随着城市大脑的城市运行管理中心的建设需求，需要构建市级、区级、乡镇级三级指挥平台，实现纵向指挥体系的打通的问题。调度系统分为一级指挥中心、二级指挥中心和三级指挥中心，一级指挥中心包括多个二级指挥中心，每个二级指挥中心均包括多个三级指挥中心，一级指挥中心、二级指挥中心和三级指挥中心均包括任务模块，音视频交互模块，消息通知模块，GIS地图模块，状态模块，网络通信模块，协议转换模块，终端模块，多个二级指挥中心之间及三级指挥中心之间是指挥权限隔离。

摘要： 本发明提供了一种QoE感知的WebRTC拥塞控制方法，包括：获取网络层中发送帧的基本信息，针对发送帧的基本信息进行重组，并针对发送帧重组信息进行记录，确定发送帧记录；接收发送端发送的数据包并基于发送帧记录针对接收帧信息进行重组，并根据接收帧重组信息确定接收帧率和对应帧的量化参数；针对接收端接收到的数据包信息进行确认，并获取每一个数据包对应的发送时间和接收时间，并根据每一个数据包对应的发送时间和接收时间计算排队延迟，获取排队延迟数据；基于接收端的接收帧率、对应帧的量化参数和接收的数据包对应的排队延迟数据，针对网络传输速率进行实时更新。本发明能够根据获取的量化参数、接收帧率信息实时控制网络传输速率。

摘要： 本申请提供了一种基于WebRTC的音视频录制方法及装置，其中，所述基于WebRTC的音视频录制方法，包括：在基于WebRTC进行音视频通话时，接收录制指令；响应于所述录制指令，控制所述WebRTC获取音视频数据；所述音视频数据包括音频数据和视频数据中的至少一种；控制所述WebRTC对所述音视频数据进行封装，得到所述音视频数据的录制文件。采用本申请提供的基于WebRTC的音视频录制方法，可以有效简化基于WebRTC实现的音视频通话的音视频数据录制过程，从而可以有效提高音视频录制效率。

摘要： 本发明公开了一种单端口实现webrtc服务端的方法，包括以下步骤：S1增加proxy功能：保留Libnice底层库多端口的实现；S2客户端发送stun request到proxy：S3proxy发送stun request给libnice：Ice candidate协商，Web端开始做连通性检测，stun binding request里的USERNAME为SDP local和remote的ice‑ufrag指定内容；S4libnice respond给proxy；S5客户端rtp流到proxy：proxy转发给libnice port，客户端反射udp包到单端口udp代理服务，由服务负责查询映射获取对应的服务端地址并转发，使用该方案后能保护服务端安全，同时能够解决很多的网络出口防火墙对能够通过的UDP端口限制的问题，并且能提高服务的性能。