基于图像风格迁移的荧光图像组织学样式转换
计算机视觉与模式识别
2019-05-17 v1 图像与视频处理
摘要
共聚焦激光内显微镜（CLE）可在离散视场内实现活体术中即时成像，尤其用于脑肿瘤，而非像传统光学显微镜那样取组织离体检验。荧光素钠驱动的CLE成像比传统的苏木精-伊红（H&E）染色更具交互性、快速且便携。然而其存在若干局限：CLE图像可能受伪影污染（运动、红细胞、噪声），且神经病理医生主要受训于如H&E等彩色染色组织学切片，而CLE图像为灰度。为提升CLE诊断质量，我们使用一份来自胶质瘤肿瘤活检的H&E切片显微图与图像风格迁移（一种融合两图内容与风格的神经网络方法）。该方法通过最小化目标图像与内容（CLE）及风格（H&E）图像的偏差实现。风格迁移图像由神经外科医生与神经病理医生评估，并与常规H&E组织学比较，他们随后在100对原始与转换图像中验证了质量增强。测试图像评审者平均评分显示，100张转换图像中有84张较原始CLE形式伪影更少且关键结构更显著。通过提供比原始CLE图像更易解读、比H&E切片获取更迅速的图像，该风格迁移方法实现了基于CLE技术的实时细胞级组织检查，其外观接近常规H&E染色，并可能比原始CLE灰度图像获得更好的诊断识别。
引用
@article{arxiv.1905.06442,
title = {Fluorescence Image Histology Pattern Transformation using Image Style Transfer},
author = {Mohammadhassan Izadyyazdanabadi and Evgenii Belykh and Xiaochun Zhao and Leandro Borba Moreira and Sirin Gandhi and Claudio Cavallo and Jennifer Eschbacher and Peter Nakaji and Mark C. Preul and Yezhou Yang},
journal= {arXiv preprint arXiv:1905.06442},
year = {2019}
}
备注
Submitted to Frontiers in Oncology