基于启发式上下文约束的血管增强型OCT到OCTA图像翻译
图像与视频处理
2024-08-22 v2 计算机视觉与模式识别
摘要
光学相干断层扫描血管成像（OCTA）是视网膜疾病临床筛查中的关键工具，可通过无创扫描实现对血管的三维精确成像。然而，基于硬件获取OCTA图像的方法由于需要专用传感器和昂贵设备而面临挑战。本文提出一种称为TransPro的新方法，可将易于获取的3D光学相干断层扫描（OCT）图像翻译为3D OCTA图像，无需任何额外的硬件改动。我们的TransPro方法主要由先前工作忽视的两个新思路驱动。第一个思路源于一项关键观察，即OCTA投影图是通过沿Z轴对其对应B扫描的像素值取平均生成的。因此，我们引入了一种融合3D对抗生成网络与新颖启发式上下文引导（HCG）模块的混合架构，有效保持了生成的OCTA图像在3D体数据与投影图之间的一致性。第二个思路是改善翻译所得OCTA投影图中的血管质量。为此，我们提出一种新颖的血管增强引导（VPG）模块，以增强网络对视网膜血管的注意力。在两个数据集上的实验结果表明，我们的TransPro优于当前最先进的方法，相较于基线方法，在MAE、PSNR、SSIM、VDE和VDC上分别相对提升约11.4%、2.7%、2%、40%和9.1%。代码见：https://github.com/ustlsh/TransPro。
引用
@article{arxiv.2303.06807,
title = {Vessel-Promoted OCT to OCTA Image Translation by Heuristic Contextual Constraints},
author = {Shuhan Li and Dong Zhang and Xiaomeng Li and Chubin Ou and Lin An and Yanwu Xu and Kwang-Ting Cheng},
journal= {arXiv preprint arXiv:2303.06807},
year = {2024}
}
备注
Accepted by Medical Image Analysis