使用预训练大语言模型的提示引导结构化胸部X光报告生成

医学报告生成从图像中自动生成放射学描述，减轻了医生的负担并减少了错误。然而，当前的方法缺乏结构化输出和医生交互性，无法生成清晰、临床相关的报告。我们的方法引入了一种提示引导的方法，使用预训练的大语言模型生成结构化胸部X光报告。首先，我们识别胸部X光中的解剖区域，生成聚焦于关键视觉元素的集中句子，从而建立基于解剖句子的结构化报告基础。我们还将检测到的解剖结构转换为文本提示，向大语言模型传达解剖理解。此外，临床上下文提示引导大语言模型强调交互性和临床需求。通过整合解剖聚焦句子和解剖/临床提示，预训练的大语言模型可以生成针对提示的解剖区域和临床上下文定制的结构化胸部X光报告。我们使用语言生成和临床有效性指标进行评估，展示了强大的性能。