利用神经辐射场从腹腔镜手术视频实现腹部三维场景渲染
计算机视觉与模式识别
2023-10-19 v1
摘要
鉴于传统腹腔镜仅提供二维(2-D)视图，病症的检测与诊断可能颇具挑战。为克服腹腔镜的视觉局限，利用腹腔镜图像与视频重建腹部三维(3-D)解剖结构已被证明是一种有前景的途径。神经辐射场(NeRFs)近期因其能从三维静态场景生成逼真图像而受到关注，从而通过新视图的合成促进对腹部的更全面探索。这使 NeRFs 区别于同步定位与地图构建(SLAM)及深度估计等替代方法。本文中，我们针对腹腔镜手术视频背景下的 NeRFs 进行了全面考察，旨在以三维渲染腹部场景。尽管实验结果为之可期，所提方法仍面临重大挑战，需在今后研究中进一步探索。
引用
@article{arxiv.2310.11645,
title = {Towards Abdominal 3-D Scene Rendering from Laparoscopy Surgical Videos using NeRFs},
author = {Khoa Tuan Nguyen and Francesca Tozzi and Nikdokht Rashidian and Wouter Willaert and Joris Vankerschaver and Wesley De Neve},
journal= {arXiv preprint arXiv:2310.11645},
year = {2023}
}
备注
The Version of Record of this contribution is published in MLMI 2023 Part I, and is available online at https://doi.org/10.1007/978-3-031-45673-2_9