中文

高效且高能的掩码图像生成模型

计算机视觉与模式识别 2026-03-03 v3 机器学习

摘要

尽管掩码图像生成模型和掩码扩散模型的设计动机和目标不同,我们观察到它们可以统一在一个单一框架内。基于这一洞察,我们仔细探索了训练和采样的设计空间,确定了影响性能和效率的关键因素。基于在此次探索中观察到的改进,我们开发了我们的模型,称为 \textbf{eMIGM}。根据经验,以 Fréchet Inception Distance (FID) 为衡量标准,eMIGM 在 ImageNet 生成任务上表现出强大的性能。特别是在 ImageNet 256×256256\times256 上,在具有相似的函数评估次数 (NFEs) 和模型参数量的情况下,eMIGM 优于开创性的 VAR。此外,随着 NFE 和模型参数量的增加,eMIGM 取得了与最先进的连续扩散模型 REPA 相当的性能,同时所需的 NFE 不到其 45\%。另外,在 ImageNet 512×512512\times512 上,eMIGM 优于强大的连续扩散模型 EDM2。代码可在 https://github.com/ML-GSAI/eMIGM 获取。

关键词

引用

@article{arxiv.2503.07197,
  title  = {Effective and Efficient Masked Image Generation Models},
  author = {Zebin You and Jingyang Ou and Xiaolu Zhang and Jun Hu and Jun Zhou and Chongxuan Li},
  journal= {arXiv preprint arXiv:2503.07197},
  year   = {2026}
}