中文

UniverSeg:通用医学图像分割

计算机视觉与模式识别 2023-04-14 v1 机器学习

摘要

尽管深度学习模型已成为医学图像分割的主流方法,它们通常无法泛化到涉及新解剖结构、图像模态或标签的未知分割任务。给定一个新的分割任务,研究人员通常需要训练或微调模型,这耗时且对临床研究人员构成了实质性障碍,他们往往缺乏训练神经网络的资源和专业知识。我们提出UniverSeg,一种无需额外训练即可解决未知医学分割任务的方法。给定查询图像和定义新分割任务的示例图像-标签对集合,UniverSeg采用一种新的Cross-Block机制生成准确的分割图,无需额外训练。为实现对新任务的泛化,我们收集并标准化了53个开放获取医学分割数据集(超过22,000次扫描)的集合,称之为MegaMedical。我们使用该集合在多样的解剖结构和成像模态上训练UniverSeg。我们证明UniverSeg在未知任务上大幅优于几种相关方法,并深入分析了所提系统的重要方面并得出见解。UniverSeg源代码和模型权重可在https://universeg.csail.mit.edu免费获取。

关键词

引用

@article{arxiv.2304.06131,
  title  = {UniverSeg: Universal Medical Image Segmentation},
  author = {Victor Ion Butoi and Jose Javier Gonzalez Ortiz and Tianyu Ma and Mert R. Sabuncu and John Guttag and Adrian V. Dalca},
  journal= {arXiv preprint arXiv:2304.06131},
  year   = {2023}
}

备注

Victor and Jose Javier contributed equally to this work. Project Website: https://universeg.csail.mit.edu