用于人工智能开发的含眼动追踪与报告口述的胸部 X 光数据集构建与验证
计算机视觉与模式识别
2020-10-09 v3
摘要
我们构建了一个丰富的胸部 X 光（CXR）图像数据集，以协助人工智能领域的研究者。数据是在一名放射科医生审阅并报告 1,083 张 CXR 图像时，通过眼动追踪系统采集的。该数据集包含以下对齐数据：CXR 图像、转录的放射学报告文本、放射科医生的口述音频以及眼动注视坐标数据。我们希望该数据集能贡献于多个研究方向，特别是面向可解释与多模态深度学习/机器学习方法。此外，疾病分类与定位、自动化放射学报告生成以及人机交互领域的研究者均可从这些数据中受益。我们报告了利用眼动注视数据集生成的注意力图进行的深度学习实验，以展示该数据的潜在效用。
引用
@article{arxiv.2009.07386,
title = {Creation and Validation of a Chest X-Ray Dataset with Eye-tracking and Report Dictation for AI Development},
author = {Alexandros Karargyris and Satyananda Kashyap and Ismini Lourentzou and Joy Wu and Arjun Sharma and Matthew Tong and Shafiq Abedin and David Beymer and Vandana Mukherjee and Elizabeth A Krupinski and Mehdi Moradi},
journal= {arXiv preprint arXiv:2009.07386},
year = {2020}
}