美韩团队开发Super-Gaussian框架,让VR中三维数据编辑更高效

PICO 4 Ultra

查看引用/信息源请点击:映维网Nweon

实现VR中体数据交互式编辑与自然语言操控

映维网Nweon 2026年08月17日)美国和韩国高校研究团队提出了一套名为Super-Gaussian的新型框架,目标是提升虚拟现实环境中体数据可视化的交互效率与编辑灵活性。

美韩团队开发Super-Gaussian框架,让VR中三维数据编辑更高效

尽管虚拟现实技术能提供更自然的空间感知和操作方式,但现有体三维数据在VR中的渲染和实时编辑仍面临计算压力大、交互不够直观等问题。

近年来,3D高斯泼溅技术正成为一种新兴的三维场景表示方法,能够将体数据转化为大量带有几何与颜色信息的高斯基元,并实现高效渲染。然而,现有高斯编辑流程多依赖离线分割或逐点选取,耗时且容易造成用户疲劳。

针对上述问题,Super-Gaussian框架提出将高斯基元进行特征感知聚类,形成结构感知的“超级高斯”单元。这些单元作为交互的基本对象,使得用户可通过画笔在三维空间中直接勾选感兴趣区域,而无需逐一选取基元。系统提供了随机游走、聚类选取和逐点选取三种模式,可组合使用以实现从粗到细的选择流程。

另外,框架集成了基于大语言模型的自然语言交互模块。用户可以通过语音或文字指令对已标记的区域进行查询、编辑或整体导览。系统通过CLIP模型对选中的三维区域进行语义嵌入,并支持用户实时添加文本标签,从而建立开放词汇的语义引用能力。例如,在医学数据中,用户可标记动脉瘤的不同部位,并通过自然语言指令调节其透明度或颜色。

研究团队在多个数据集上进行了对比实验。量化结果表明,在相同选取任务中,Super-Gaussian在交并比、F1分数等指标上优于现有基于屏幕空间或逐点选取的方法,同时交互次数和完成时间均有显著降低。其中,在vortex数据集上,平均完成时间从约139秒(桌面方法)和约138秒(逐点VR方法)降至约22秒;在lobster数据集上,时间从约143秒和约110秒降至约94秒。

在渲染性能方面,基于可编辑高斯表示的VR渲染在多种数据集上均能稳定维持接近120帧每秒的帧率,高于VR舒适度所需的90帧每秒阈值。相比之下,传统体三维渲染方法在512分辨率以上时帧率明显下降,部分数据集因显存限制无法渲染。

相关论文

当然,研究指出了当前框架的若干局限,例如聚类效果依赖预处理参数、语义嵌入基于通用CLIP模型未针对体数据微调等。未来工作将探索自适应聚类策略和轻量级领域适配方法,以进一步提升系统的鲁棒性与实用性。

本文链接https://news.nweon.com/142411
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  AR/VR开发者  |  映维粉丝读者
XR Research Wechat Group/微信群
资讯