微软AR/VR专利提出实现精确后期重投影的有效方法
实现精确后期重投影的有效方法
(映维网Nweon 2024年10月17日)对于AR/VR,后期重投影(Late Stage Reprojection/LSR)是一项重要的技术。在一份专利申请中,微软就提出了一种实现精确后期重投影的有效方法。
实现LSR的方法包括基于渲染深度缓冲区中包含的深度信息对图像应用校正。在各种示例中,深度缓冲区为呈现的彩色图像中的每个像素编码与头显或其他显示设备的距离。后期重投影过程可以确定在后期重投影期间应用于每个像素的校正。例如,图像中离用户较近的部分可能比离用户较远的部分需要更大幅度的校正。
在各种示例中,LSR方法涉及根据网格从渲染深度缓冲区中采样位置,计算每个网格顶点的位置校正,并在顶点之间插值校正。可以使用规则划分的网格对深度缓冲进行采样。使用低分辨率的规则划分网格意味着深度缓冲区的某些部分采样不足,从而导致重投影图像的视觉伪影。使用高分辨率的规则划分网格可以减少视觉伪影,但需要高计算重投影成本。
在各种示例中,可以使用自适应镶嵌网格,网格在内容复杂性较高的区域具有较高的分辨率,而在内容复杂性较低的区域具有较低的分辨率。使用自适应镶嵌网格意味着以较低的计算重投影成本减少视觉伪影。
镶嵌包括将规则网格细分为更细分的部分。在各种示例中,通过将网格块划分为细分部分并将网格块转换为三角形表示来实现正方形网格块的镶嵌。在各种示例中,镶嵌是由镶嵌器执行。
尽管相关方法在网格生成后的重投影成本较低,但与固定网格重投影技术相比,自适应镶嵌的计算成本十分显着。在现有的方法中,一个网格块的可能细分数量非常高。例如,一个正方形的网格块在水平和垂直方向上以及沿着四个边缘中的每一个使用分数细分级别进行划分。所以,镶嵌需要在专用硬件计算。但在远程渲染场景中,客户机设备具有有限的计算预算,并且需要高质量的重投影来补偿网络系统固有的高延迟。所以,需要以较低的计算成本产生自适应细分网格的LSR细分方法。
......(全文 5288 字,剩余 4556 字)


