用于可视化微创手术视频中三维器械追踪的插件
计算机视觉与模式识别
2024-01-19 v1 系统与控制
图像与视频处理
系统与控制
摘要
本文解决了微创手术(MIS)中的器械追踪和 3D 可视化挑战,这对于计算机辅助干预至关重要。传统和机器人辅助的 MIS 面临着 2D 相机投影受限和硬件集成度低的问题。目标是追踪并可视化整个手术器械,包括器械杆和金属钳夹,从而在手术环境中实现安全导航。所提出的方法涉及基于分割图的 2D 追踪,在无需大量真值知识的情况下促进了带标签数据集的创建。2D 区间内的几何变化表示运动,基于运动学的算法将结果处理为 3D 追踪信息。2D 和 3D 运动估计的合成与实验结果表明误差可忽略不计,验证了该方法在 MIS 视频中器械的标记和运动追踪方面的有效性。结论强调了所提出的 2D 分割技术的简单性和计算效率,强调了其作为器械追踪和 MIS 实践中 3D 可视化直接插件的潜力。
引用
@article{arxiv.2401.09472,
title = {Plug-in for visualizing 3D tool tracking from videos of Minimally Invasive Surgeries},
author = {Shubhangi Nema and Abhishek Mathur and Leena Vachhani},
journal= {arXiv preprint arXiv:2401.09472},
year = {2024}
}