OCT2Confocal：基于 3D CycleGAN 的视网膜 OCT 图像到共聚焦显微镜的翻译
图像与视频处理
2024-10-30 v3 计算机视觉与模式识别
摘要
光学相干断层扫描（OCT）与共聚焦显微镜在视网膜成像中均至关重要，各自具有独特的优势与局限。活体 OCT 提供快速、非侵入性成像，但可能受清晰度问题与运动伪影困扰。离体共聚焦显微镜提供高分辨率、细胞级细节的彩色图像，但具侵入性并引发伦理担忧及潜在组织损伤。为桥接这两种模态，我们开发了用于活体 OCT 到离体共聚焦显微镜图像无监督翻译的 3D CycleGAN 框架。应用于我们的 OCT2Confocal 数据集时，该框架有效翻译于 3D 医学数据域之间，精准捕捉血管、纹理与细胞细节。这标志着首次尝试利用 OCT 固有的 3D 信息并将其翻译至共聚焦显微镜丰富细致的彩色域。通过定量与定性评估，3D CycleGAN 框架展现出令人称赞的图像保真度与质量，在有限数据约束下优于现有方法。这种视网膜共聚焦图像的非侵入性生成有潜力进一步增强眼科学中的诊断与监测能力。我们的源代码与 OCT2Confocal 数据集可在 https://github.com/xintian-99/OCT2Confocal 获取。
引用
@article{arxiv.2311.10902,
title = {OCT2Confocal: 3D CycleGAN based Translation of Retinal OCT Images to Confocal Microscopy},
author = {Xin Tian and Nantheera Anantrasirichai and Lindsay Nicholson and Alin Achim},
journal= {arXiv preprint arXiv:2311.10902},
year = {2024}
}
备注
4pages, 5 figures