清华团队提出GeoFovea-GS框架,为无线空中VR降低传输成本
为无线空中VR降低传输成本
(映维网Nweon 2026年08月03日)随着UAV无人机技术的普及,无线空中虚拟现实正成为远程探索、数字孪生和基础设施检查等领域的重要工具。通过无人机捕获大规模户外场景并重建为3D数字环境,用户可以从任意角度远程沉浸式观察。然而,如何在有限的无线带宽和功耗下传输高分辨率视图,一直是个难题。
针对这个问题,清华大学的研究人员提出了一种名为GeoFovea-GS的几何感知跨层框架,目标是提升无线空中VR的传输效率。

近年来,3D Gaussian Splatting(3DGS)技术的发展为缓解VR通信负担提供了新思路。系统无需逐帧传输图像,只需传输紧凑的camera姿态信息,再由预训练的3DGS模型合成对应视图。但这种“仅姿态渲染”方式在大规模空中场景中存在缺陷:无人机轨迹稀疏不规则,户外场景包含长距离结构和深度突变,3DGS可能生成外观看似合理但几何结构错误的视图,破坏VR体验的沉浸感。
GeoFovea-GS的核心思想是:只在几何不可靠、感知重要且信道条件允许的区域花费无线资源。系统将每帧图像划分为多个tile,对可靠的区域直接使用3DGS渲染(仅传输姿态信息),对不可靠的区域则通过无线传输校正tile。
研究团队开发了一种“注视点几何感知失真度量”,综合考量三个维度:光度渲染误差(像素级差异)、几何不一致性(深度信息偏差)和时间不稳定性(连续帧之间的抖动)。同时,引入注视点权重。因为VR用户对视野中心区域更敏感,所以中心区域的失真会被赋予更高权重。
在此基础上,研究将“选择哪些tile进行传输校正”转化为一个跨层优化问题,并设计了轻量级的“信息价值调度器”。调度器优先将无线资源分配给那些几何误差大、注视点权重大且传输功耗增加小的tile。
实验结果显示,在20毫瓦平均功率预算下,GeoFovea-GS的注视点PSNR(F-PSNR)达到26.72 dB,显著优于仅依赖3DGS渲染的14.73 dB,也优于仅考虑信道质量的MaxRate(18.92 dB)、仅考虑注视点的Fovea-only(21.46 dB)、仅考虑RGB重建误差的RGB-CLO(23.18 dB)以及仅考虑几何不一致性的Geo-only(24.05 dB)。在深度误差(D-RMSE)方面,GeoFovea-GS为0.142,而GS-only为0.514。
在满足相同VR质量目标(失真≤0.02)的前提下,GeoFovea-GS仅需16.9毫瓦平均功率和每帧0.37 Mbits的传输量,而全图像传输需要52.4毫瓦和5.42 Mbits。相比最强的自适应基线Geo-only,GeoFovea-GS在相同质量目标下将所需功率降低了18.0%,比特率降低了22.9%。
相关论文:GeoFovea-GS: Geometry-Aware Cross-Layer Gaussian Splatting for Wireless Aerial VR
总的来说,研究为带宽和功耗受限的无线空中VR场景提供了一套可落地的解决方案,让系统智能判断哪些区域值得投入资源传输,哪些区域可以靠本地渲染应付。随着低空经济和无人机应用的快速发展,这类技术在远程巡检、应急指挥、沉浸式地图等领域具有潜在应用价值。

