面向疟疮检测的数据质量与模型泛化挑战
机器学习
2025-01-03 v1 信号处理
摘要
疟疾仍是全球健康负担中的重要问题,尤其是在资源有限的地区,及时且准确的诊断对于有效的治疗和控制至关重要。深度学习(Deep Learning, DL)已成为自动化疟疾检测的变革性工具,具有高准确率和可扩展性。然而,这些模型的有效性受数据质量和模型泛化问题的制约,包括数据不平衡、数据多样性有限以及标注变异性。这些问题会降低诊断可靠性,并阻碍实际应用。本文对这些挑战及其对疟疾检测性能的影响进行了全面分析。关键发现表明,数据不平衡会导致F1分数下降约20%,地区偏差显著阻碍模型泛化。 proposed的解决方案,如基于GAN的数据增强,通过生成合成数据平衡类别并增强数据集多样性,准确率可提高15-20%。领域适应技术,包括迁移学习,进一步提高了跨域鲁棒性,灵敏度提升最高可达25%。此外,发展多样化的全球数据集和协作数据共享框架也被强调是公平且可靠疟疾诊断的基石。还强调了可解释人工智能技术在提高临床采纳和可信度方面的作用。通过解决这些挑战,本工作推进了AI驱动的疟疾检测领域,并为研究者和实践者提供了可操作的见解。所提出的解决方案旨�支持开发可及且准确的诊断工具,尤其为资源受限的人群。
引用
@article{arxiv.2501.00464,
title = {Addressing Challenges in Data Quality and Model Generalization for Malaria Detection},
author = {Kiswendsida Kisito Kabore and Desire Guel},
journal= {arXiv preprint arXiv:2501.00464},
year = {2025}
}
备注
22 pages, 17 figures, 17 tables, In: Journal of Sensor Networks and Data Communications (JSNDC). ISSN: 2994-6433. DOI: 10.33140/JSNDC.04.03.09