英伟达研究：延迟是AR/VR电子竞技的最关键因素，比图像质量还重要
英伟达回顾了NVIDIA Research和其他机构对电子竞技需求的研究，并讨论了它们对其他交互式应用的影响
（映维网Nweon 2023年10月17日）媒体技术正在继续从被动流媒体向参与式交互性体验过渡，包括网页浏览、视频会议和游戏，以及AR/MR/VR和电子竞技等新兴的和要求更高的应用。然而，显示延迟、刷新率和大小等特征应该如何变化以满足这一趋势呢？
在《国际信息显示学会会刊（The Journal of the Society for Information Display）》的特邀报告中，英伟达回顾了NVIDIA Research和其他机构对电子竞技需求的研究，并讨论了它们对其他交互式应用的影响。
尽管并不是所有的交互式应用程序都依赖于响应性和最大化性能，但在电竞游戏中，人类表现决定了谁赢谁输，而响应时间是人类表现的重要因素。电竞玩家的目标是获胜，并从激烈的竞技中获得乐趣。对他们而言，每一毫秒都非常重要，
如果能帮助选手获胜，他们愿意牺牲一系列的便利和图形功能。有诸多例子表明，为了提高游戏性能，这类玩家拒绝了游戏中精心设计的图像功能。
英伟达认为电竞游戏是图像研究人员为注重性能人群设计新渲染系统的独特机会，以及它们对其他交互式应用的影响，比如AR/MR/VR。团队特别关注计算机图形界尚未充分开发的三个机会领域。
尽管高帧率和低延迟通常是并行的，但它们各自对玩家有利的原因却各不相同。另外，特定渲染架构方法实际上可能会增加延迟以换取更高的帧速率，所以必须考虑相关权衡。
最近的研究表明，高帧率交互为新的渲染方法提供了机会。
当延迟很高时，交互式应用程序的运行可能会很糟糕。具有高网络延迟的系统特别不希望没有延迟隐藏。客户端和服务器之间的延迟是一个众所周知的问题，游戏实现了一系列广泛的延迟隐藏技术。延迟隐藏和补偿算法一般通俗地称为netcode。
尽管一系列的技术都需要一个完整的游戏客户端才能完成，但隐藏延迟的一种轻量级方法是VR风格的延迟输入采样和基于图像的扭曲。值得注意的是，客户端-服务器延迟隐藏技术非常有效，与相同数量的网络延迟相比，本地系统延迟对游戏性能的影响要大得多。对于本地计算机系统延迟，主要贡献是输入设备、游戏模拟、游戏渲染和显示输出。
对于大多数PC游戏而言，渲染是计算机系统延迟的重要组成，并且恰好是图形研究人员可以贡献新算法的地方。除了新颖的算法研究之外，简单的渲染管道更改同样可以减少输入到输出的延迟。
竞争吸引玩家进入电竞游戏，令他们关心对游戏表现至关重要的感知元素。因此，电竞玩家调整图像设置的方式十分具有参考意义。在玩电竞游戏时，玩家优先考虑降低延迟，而不是其他视觉设置，因为这给了他们最好的获胜机会。
对他们来说，通过接受近乎即时的视觉反馈，尽可能加快感知-行动循环非常重要。其次是高空间分辨率，因为它可以更精确地显示空间对齐。因此，只要不影响游戏延迟，抗锯齿设置通常是可取的。其他诸如阴影和次表面散射等高保真效果则排在最后。
当然，并不是说电竞玩家根本不关心高保真图像。这只是反映了电竞玩家对表现的重视：失败比看到低保真度的视觉效果更伤人。
英伟达表示，他们对图形研究人员的电竞研究方向的前景感到兴奋。低延迟、高帧率和人类感知对用户表现的影响相对而言尚未得到探索。这种不断扩大的研究利基为业界提供了为开发者和游戏玩家等提供新工具和设备，从而帮助更好地享受体验的机会。同时，针对电竞的研究可以为诸如VR/MR/AR等交互式应用提供重要的洞察和参考。
如果你对英伟达的研究感兴趣，你可以访问这个页面以访问名为《重新思考电子竞技和高交互性应用的显示需求/Rethinking Display Requirements for Esports and High Interactivity Applications》的特邀报告，团队主要回顾了NVIDIA Research和其他机构对电子竞技需求的研究，并讨论了它们对其他交互式应用的影响。
