超越桌面:基于 Meta Quest 3 和 MX Ink 的沉浸式分割技术
人机交互
2025-06-06 v1 计算机与社会
图形学
多媒体
摘要
医学影像分割是临床诊断疾病、规划手术及其他程序中不可或缺的技术,但人工标注往往繁琐且耗时。为缓解此问题,本研究实现并评估了基于元宇宙(XR)的CT扫描解剖结构分割工具的可用性与临床适用性,采用 Meta Quest 3 头戴式显示器和Logitech MX Ink 触笔。我们开发了沉浸式界面,实现对二维和三维医学影像数据的实时交互,设计可自定义的工作空间,以缓解常规人工分割工具固有的工作流程碎片化问题和认知负荷。该平台融合触笔驱动的标注功能(模拟传统的笔触纸面工作流程)与即时三维体数据渲染。针对公开的头面面部CT数据集进行的用户研究表明,该工具在基础可用性方面具有可行性,系统可用性比例表(SUS)得分为66,符合医疗应用的预期范围。参与者称赞系统直观的控制方式(ISONORM 指标下自描述性得分4.1/5)以及空间交互设计,定性反馈突出了混合二维/三维导航和真实触笔人体工学方面的优势。尽管用户指出了提升任务特定精度和错误管理方面的潜在空间,但该平台的核心工作流程实现了动态切片调整,较桌面工具显著降低了认知负荷。结果表明,XR 触笔范式为开发沉浸式分割工具提供了有前景的基础,后续迭代将聚焦触觉反馈校准和工作流程个性化,以推动其在术前规划中的应用。
引用
@article{arxiv.2506.04858,
title = {Beyond the Desktop: XR-Driven Segmentation with Meta Quest 3 and MX Ink},
author = {Lisle Faray de Paiva and Gijs Luijten and Ana Sofia Ferreira Santos and Moon Kim and Behrus Puladi and Jens Kleesiek and Jan Egger},
journal= {arXiv preprint arXiv:2506.04858},
year = {2025}
}
备注
10 pages