人工智能与增强现实在机器人手术中的集成：基于 dVRK 与手术教育场景的初步研究
机器人学
2022-03-04 v2 人工智能
摘要
由于其临床优势，机器人辅助手术已变得越来越普及。与此同时，机器人手术中的人工智能（AI）与增强现实（AR）正快速发展并受到广泛关注。然而，现有方法尚未探讨 AI 与 AR 在机器人手术中的连贯集成。本文中，我们开发了一种新颖的系统，通过无缝融合人工智能模块与增强现实可视化，自动生成用于机器人手术教育的手术引导。具体而言，我们首先利用强化学习从专家示范中学习，然后生成 3D 引导轨迹，提供手术过程的先验上下文信息。连同文本提示等其他信息，该 3D 轨迹随后被叠加在 dVRK 的立体视图中，用户可感知 3D 引导并学习手术过程。所提出的系统通过一项关于手术教育任务 peg-transfer 的初步实验进行了评估，证明了其作为下一代机器人辅助手术教育方案的可行性与潜力。
引用
@article{arxiv.2201.00383,
title = {Integrating Artificial Intelligence and Augmented Reality in Robotic Surgery: An Initial dVRK Study Using a Surgical Education Scenario},
author = {Yonghao Long and Jianfeng Cao and Anton Deguet and Russell H. Taylor and Qi Dou},
journal= {arXiv preprint arXiv:2201.00383},
year = {2022}
}