苹果专利提出运动矢量视频压缩,提高渲染传输AR/VR图像视频效率

查看引用/信息源请点击:映维网

节省使用前一帧来估算运动矢量的时间,从而帮助减少从帧生成到帧渲染的周期时间。

映维网 2021年06月07日苹果早前曾申请过多份关于可用于VR/AR的视频编码系统专利,这主要是为了节省资源,并以低延迟对高分辨率视频源进行编码和传输。

日前,美国专利商标局又公布了相关主题的苹果专利申请。名为“Video compression methods and apparatus”主要描述了一种针对运动矢量的视频压缩方法。

苹果构思的一种XR系统包括头显和基站。头显和基站均可包括允许两者通过有线方式或无线方式进行通信和交换数据的通信技术。

头显可以包括收集有关用户环境信息的外向传感器和收集有关用户信息的内向传感器。传感器收集的信息可以通过有线方式或无线方式传输到基站。所述基站可包括配置为生成和渲染帧,并且压缩和传输所述帧的软件和硬件。

专利描述的方法可用于在帧发送到头显时对其进行编码的方法。特别地,这种编码方法主要用于减少基站编码渲染帧所花费的时间。

传统的编码器使用之前的帧来作为参考帧,并用于计算当前帧中被编码的像素或像素块的运动矢量。但是,苹果提出的方法不同。这家公司表示,利用传感器捕获的运动数据确定的运动矢量可以输入到编码方法,并在编码当前帧的运动补偿期间使用。

这种运动矢量(头部运动矢量)可以根据运动数据确定的用户头部的预测运动来指示环境中对象的方向和速度。所以在编码当前帧时,使用预先确定的运动矢量可以节省使用前一帧估算运动矢量的时间。

在一个实施例中,用于基站编码器编码帧的运动信息可以与帧数据一起嵌入发送到头显的数据流中。当渲染或合成用于显示的帧时,可以在头显使用所述运动信息。包括在数据流中的运动矢量以及帧数据可以由头显的渲染应用使用,其可根据在数据流中接收到的运动矢量来旋转或移动前一帧的内容,从而利用先前接收到的帧合成帧。

以这种方式,苹果提出的方法可以节省使用前一帧来估算运动矢量的时间,从而帮助减少从帧生成到帧渲染的周期时间。

相关专利Apple Patent | Video compression methods and apparatus

名为“Video compression methods and apparatus”的苹果专利申请最初在2021年5月提交,其属于苹果在2020年4月提交专利的延续案。

本文链接https://news.nweon.com/86417
转载须知:转载摘编需注明来源映维网并保留本文链接
入行必读:腾讯可以向Facebook学习什么

更多阅读推荐......

资讯