预防胜于治疗:胸部异常检测的案例研究
人工智能
2023-05-19 v1
摘要
预防胜于治疗。这一古老真理不仅适用于疾病预防,也适用于医学中使用的 AI 模型问题的预防。预测模型故障的根源往往不在训练过程,而是追溯到数据采集阶段或实验设计阶段。在本文中,我们详细分析了一个单一用例——一个与 X 射线肺部图像中异常检测相关的 Kaggle 竞赛。我们展示了针对数据不平衡的一系列简单测试如何暴露数据采集和标注过程中的缺陷。复杂模型能够学习此类伪影,并且在训练期间或之后难以消除这种偏差。数据收集阶段产生的错误使得正确验证模型变得困难。基于该用例,我们展示了如何在预测模型的整个生命周期中监控数据和模型平衡(公平性),从数据采集到模型评分的奇偶分析。
引用
@article{arxiv.2305.10961,
title = {Prevention is better than cure: a case study of the abnormalities detection in the chest},
author = {Weronika Hryniewska and Piotr Czarnecki and Jakub Wiśniewski and Przemysław Bombiński and Przemysław Biecek},
journal= {arXiv preprint arXiv:2305.10961},
year = {2023}
}