高通专利提出XR眼间预测模型,降低视频编码功耗
XR眼间预测模型配置
(映维网Nweon 2025年07月17日)XR技术正在快速增长,并可能广泛应用于游戏以外。对于XR设备,视频编码使用大量资源,并造成巨大功耗和延迟。所以,减少视频编码延迟和处理开销可能帮助XR设备实现更长的正常运行时间。
在一份专利申请中,高通就介绍了一种XR眼间预测模型。例如,可以利用多摄像头之间联合源信道编码方案的预测模型作为变换函数。发明的一个优点是,可以利用与多个摄像头注视的几何形状和方向相关信息来获得用户眼睛之间的粗略预测。另一优点可包括基于注视的几何形状和方向的压缩改进,以及视频编码器的功率降低。
在一个实施例中,将与第一摄像头的第一视角相关联的第一帧的至少一部分转换为与第二摄像头的第二视角相关联的第二帧的至少一部分。所述设备向第二无线设备发送用于将所述第一帧的至少一部分转换为所述第二帧的至少一部分的所述至少一个预测模型的预测指示。所述设备向所述第二无线设备发送编码信号,编码信号包括包含至少所述第一帧和所述第二帧的组合的组合帧。所述设备基于所述至少一个预测模型对所述组合帧进行解码。
视频编码器,如H.264、H.265或类似,将视频(例如图像)的每一帧分解成子区域的基础上运行,然后对于每个子区域,编码器可以尝试数个假设(例如预测),编码器可以根据视频质量和压缩选择最佳或最优假设。假设可以以各种形式进行预测。例如,特定预测可能基于相邻像素,时间预测可以基于实时图像等等。
......(全文 4042 字,剩余 3486 字)
请微信扫码通过小程序阅读完整文章或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限