基于虚拟染色内镜图像生成的胃部三维重建
计算机视觉与模式识别
2020-04-28 v1
摘要
胃内镜是使医疗从业者诊断患者胃内各类病变的标准临床流程。若发现任何病变，感知病变相对于胃整体视图的位置十分重要。我们先前的研究表明，可利用运动恢复结构（SfM）流程从染色内镜图像重建整个胃形状，其中使用喷洒靛胭脂（IC）蓝染料的图片，通过增强胃表面纹理来增加 SfM 的特征匹配。然而，向整个胃喷洒 IC 染料需要额外的时间、人力和成本，对患者与从业者均非理想选择。本文中，我们提出一种替代方案，基于在未配对真实无 IC 与 IC 喷洒图像上训练的图像到图像风格迁移，生成虚拟 IC 喷洒（VIC）图像，从而无需 IC 染料即可实现全胃三维重建。我们具体探究了输入与输出颜色通道选择对生成 VIC 图像的影响，发现将无 IC 绿通道图像转换为 IC 喷洒红通道图像可给出最佳的 SfM 重建结果。
引用
@article{arxiv.2004.12288,
title = {Stomach 3D Reconstruction Based on Virtual Chromoendoscopic Image Generation},
author = {Aji Resindra Widya and Yusuke Monno and Masatoshi Okutomi and Sho Suzuki and Takuji Gotoda and Kenji Miki},
journal= {arXiv preprint arXiv:2004.12288},
year = {2020}
}
备注
Accepted for main conference in EMBC 2020