使用带结构化提示的大型文生图模型进行皮肤病识别：案例研究
计算机视觉与模式识别
2023-01-19 v1
摘要
本文研究了大型文生图（LTI）模型在自动诊断少数具有罕见性或严重缺乏标注数据集的皮肤病症方面的潜在用途。作为 LTI 模型的输入，我们提供了基于标准医学教科书中条件叙述的仔细观察而设计的通用但简洁的提示结构的针对性实例化。在这方面，我们铺平了利用可获取的教科书描述，通过 LTI 模型的视角，对数据稀缺病症进行自动诊断的道路。实验显示了所提出框架的有效性，包括对被感染区域更好的定位。此外，它具有跨医学子领域泛化的巨大可能性，不仅可以缓解数据稀缺问题，还可以使自动诊断从普遍存在的种族偏见中去偏。
引用
@article{arxiv.2301.07178,
title = {Using Large Text-to-Image Models with Structured Prompts for Skin Disease Identification: A Case Study},
author = {Sajith Rajapaksa and Jean Marie Uwabeza Vianney and Renell Castro and Farzad Khalvati and Shubhra Aich},
journal= {arXiv preprint arXiv:2301.07178},
year = {2023}
}