具有减少的音频延迟的沉浸式VR流式传输的方法和系统

摘要

本发明公开了具有减少的音频延迟的沉浸式VR流式传输的方法和系统。一种响应于用户相对于声音系统的位置变化，使用HRTF函数来快速捕获预先计算的音频帧的新的位置提示的虚拟现实(VR)音频渲染系统和方法。在客户端‑服务器VR系统中，当检测到用户位置改变时，客户端会基于新位置确定适当的HRTF，并将它们与服务器基于先前位置生成的一组音频帧进行卷积，从而产生修改的帧以用于渲染。同时，客户端将新位置传播到服务器，以生成用于校正后的位置的后续音频帧。由于HRTF卷积在计算上耗费少，因此可以显著减少由用户感知的用户位置变化与由此导致的声音变化之间的延迟。因此，可以保持用户的沉浸式VR体验。