雨果·巴拉:行业北极星Vision Pro过度设计不适合产品市场

Specto Medical基于Vision Pro+Unity构建XR医学影像平台

查看引用/信息源请点击:映维网Nweon

已获得美国FDA 510(k)临床使用许可

映维网Nweon 2025年04月17日)瑞士医疗软件公司Specto Medical成立于2022年。利用Unity引擎和诸如Apple Vision Pro等头显设备,他们正致力于通过沉浸式3D可视化重新定义术前规划和患者沟通。

这家公司的解决方案日前正式获得了美国FDA 510(k)临床使用许可,而Unity博客专门分享了团队是如何将医学影像转变为直观的交互式体验。

在一次术前规划会议中,一名神经外科医生正通过Apple Vision Pro头显访问患者的脑部扫描。一团复杂的血管以3D形式在周围显示。医生发现,血管异常,并迅速识别出动脉瘤。

这种医疗影像曾经只是一堆灰度计算机断层扫描(CT),但现在变成了一个沉浸式3D环境。外科医生可以在动脉瘤周围走动,从各个角度检查它。

这就是Specto解决方案的日常现实,一个基于Unity构建的尖端医学影像可视化平台。

从复杂到清晰

在神经外科这个高风险的领域,清晰度至关重要。今天的医学影像技术产生了极其详细的扫描,但在过去我们通常难以在手术规划和患者沟通中充分利用丰富的数据集。

传统的2D可视化要求外科医生从平面切片中脑补重建复杂的3D解剖结构,但这个过程既认知负担重又容易误解。另外,在面对灰度图像和医学术语时,患者常常难以理解相关的诊断。

通过将原始影像数据转化为直观且可交互的3D可视化,Specto正在解决相关挑战。对于外科医生而言,这意味着减少认知负担和增强空间理解,而患者则可以理清自己的病情,并用清晰取代焦虑和困惑。

将医学影像转化为可操作的洞察

Specto通过提供一套实用工具,来令医学影像在三维中栩栩如生。从沉浸式可视化和手术规划到远程协作和医院整合,相关解决方案在每一步都支持临床医生——从诊断到手术室。

  1. XR中的高保真医学可视化

    Specto允许医疗专业人员能够在几数钟内在交互式XR环境中可视化传统医学影像数据,如CT和MRI。通过实时交互的直接体三维渲染,Specto消除了对冗长图像分析、3D重建或表面网格创建的需求。放射数据通过光线行进实时渲染,保留了原始扫描的所有丰富细节。

    另外,医生可以动态调整可视化参数,以突出不同的组织或结构,并隔离感兴趣的器官或病理。体积渲染器经过优化,即使在复杂数据集下也能保持高帧率,确保在延长的XR会话中提供流畅舒适的体验。

  2. 外科规划

    Specto包括用于术前规划的交互工具。外科医生可以标注感兴趣的结构,使用测量工具来评估解剖标志之间的距离或角度,并在患者的解剖结构中虚拟定位植入物以评估其适合度,而所有这一切都在手术室内进行切口之前实现。

    对于外科医生来说,最具变革性的方面之一是能够以真实的深度感知来可视化复杂的解剖结构。从平面CT或MRI扫描中重建3D图像的心理体操不再必要。患者特定的解剖结构以3D形式呈现,按比例显示,恰好就在眼前。这种增强的空间意识提高了外科信心,并可能在手术室内产生似曾相识的效果。

  3. 在线协作

    Specto支持在共享虚拟环境中的多用户会话。多名外科医生、放射科医生或学生可以加入同一3D场景,共同检查一个案例。在教育环境中,讲师可以通过VR引导住院医生了解解剖结构。在临床环境中,来自不同地点和专业领域的外科医生可以在共享虚拟空间中会面,讨论手术方法。

    这种协作功能同样增强了患者教育,因为用技术术语告知诊断或查看模糊的黑白扫描图像可能会令患者感到害怕和困惑。

    使用Specto,护理人员可以向患者展示他们身体问题,以及如何以直观的格式修复它。这种格式不需要医学背景即可理解,并帮助患者成为他们护理旅程中更积极的参与者,而不是被动的治疗接受者。

  4. 医院集成

    Specto可以无缝集成医院的影像和归档系统,所以外科医生能够快速将扫描结果导入可视化环境。这种集成在早晨外科简报期间节省了宝贵的时间,因为临床医生可以立即访问患者的扫描结果并在虚拟3D环境中讨论病例。

通过Unity的实时3D平台实现精确度

为了创建这个实时医疗可视化平台,Specto的开发者选择了Unity作为基础。

  1. 快速原型制作和迭代

    在早期原型制作阶段,团队需要在VR中实验各种体积渲染技术和交互概念。Unity的开发环境为快速迭代提供了理想的工具,特别是在着色器开发方面。Unity的热重载功能允许在不重新编译整个应用程序的情况下实时更新着色器代码,为优化体三维渲染算法创造了高效的工作流程。当微调驱动Specto可视化的光线行进着色器时,这一功能证明是无价之宝。

  2. 高性能图形和集成

    Unity的可扩展图形管道使Specto团队能够实现他们的自定义光线行进渲染器,同时依然受益于强大、经过生产验证的渲染系统的核心能力。他们利用自定义计算着色器进行GPU加速的体三维处理,实现了VR中医疗可视化所需的性能。

    内置于Unity的性能分析工具帮助识别和解决性能瓶颈,从而实现流畅的体验,外科医生可以立即调整组织可见性或应用切割平面和分割以突出内部结构。

  3. 跨平台XR支持

    Unity最重要的优势之一是其广泛的平台和设备支持。利用Unity,团队可以将Specto部署到各种硬件,无需在集成新API上投入大量工程资源。应用程序支持Meta Quest 3等VR头显和HoloLens 2等AR设备。

  4. Unity生态系统的好处

    基于Unity的构建使Specto能够利用成熟且得到良好支持的开发生态系统。在Unity Asset Store可用的资源显著加快了团队的进展,所以他们能够专注于核心创新,而不是重新发明基础组件。

    例如,Specto使用了Mirror,一个第三方多人框架,快速实现协作功能,而无需从头构建网络层。其他现成的资源,如简单的3D模型、调试工具和环境资产,帮助简化了开发和原型制作。

    Unity的普遍性同时意味着与第三方服务和硬件集成的广泛兼容性,而对.NET标准的支持则使得可以访问用于加密、高级日志记录和其他基本后端功能的可信库。

塑造外科护理的未来

随着XR技术的进步——更轻的头戴设备、更清晰的显示屏和更长的续航——使用Specto的体验将变得更加无缝和深远。很容易想象这样一个未来:外科医生查看VR扫描就像阅读病例记录一样常规,而患者则作为标准护理的一环可以自然接受个性化的3D解剖导览。

通过将医学专业知识与Unity的实时3D技术相结合,Specto Medical正在帮助弥合复杂医学数据与直观理解之间的差距——使临床医生能够做出更自信的决策,并赋予患者更清晰的健康洞察。

沉浸式医疗保健不再是未来的愿景;它已经到来——并且已经为外科医生和患者带来了更好的结果。

本文链接https://news.nweon.com/129198
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

资讯