SLIMBRAIN：用于体内手术过程中高光谱分类映射与深度信息的增强现实实时采集与处理系统
人机交互
2024-04-02 v1 计算机视觉与模式识别
机器学习
摘要
在过去的二十年里，增强现实（AR）已在社会和技术应用领域的各个领域推动了新界面的快速发展。其中一个领域是医学，尤其是外科手术，这些可视化技术有助于提高术前和术中操作的有效性。遵循这一趋势，本文提出了SLIMBRAIN，一个实时采集和处理的AR系统，适用于从高光谱（HS）信息中分类和显示脑肿瘤组织。该系统在肿瘤切除手术过程中以每秒14帧的速度捕获和处理HS图像，以在神经外科医生操作的同时检测和界定癌组织。结果以AR可视化呈现，分类结果与LiDAR相机捕获的RGB点云重叠。这种表示允许在捕获和处理的同时自然地导航场景，提高了可视化和因此HS技术界定肿瘤的有效性。整个系统已在真实的脑肿瘤切除手术中得到验证。
引用
@article{arxiv.2404.00048,
title = {SLIMBRAIN: Augmented Reality Real-Time Acquisition and Processing System For Hyperspectral Classification Mapping with Depth Information for In-Vivo Surgical Procedures},
author = {Jaime Sancho and Manuel Villa and Miguel Chavarrías and Eduardo Juarez and Alfonso Lagares and César Sanz},
journal= {arXiv preprint arXiv:2404.00048},
year = {2024}
}
备注
14 pages, 19 figues