虚拟环境下的低延迟协同渲染方法研究

虚拟现实技术以其独特的沉浸感、交互性,在游戏、直播等各领域的应用愈加广泛。渲染技术是虚拟现实的核心环节之一,而只在本地客户端渲染是目前主要渲染方案,由于实时渲染需要大量的计算资源,导致虚拟现实应用存在响应延迟高、画面刷新率低、图像质量差以及虚拟场景复杂等问题。针对上述问题,该文提出了虚拟环境下低延迟协同渲染方法。首先,将复杂的虚拟环境进行前景交互和背景环境拆分;其次,将渲染工作量较大的背景环境卸载至服务端进行处理;最后,通过运动轨迹预测将渲染的复杂背景以全景图的方式进行分割编码传输至客户端与前景渲染的内容进行合并呈现。经过实验验证,这种协同渲染的方法能够进一步降低传输过程中的CPU/GPU利用率以及网络延迟,提高帧刷新率,进而实现高清低延迟交互。