中文

PosterOmni:基于任务蒸馏与统一奖励反馈的通用艺术海报创建

计算机视觉与模式识别 2026-02-13 v1

摘要

图像到海报生成是一种高需求任务,既需要局部调整,也需要高层次的设计理解。模型必须在保持语义忠实性和审美一致性的前提下,生成文本、布局、风格和视觉元素。该过程涉及两个阶段:局部编辑阶段要求基于身份的生成、缩放、填充和延伸,以保留具体的视觉实体;全局创建阶段则依赖布局和风格驱动,要求理解抽象的设计概念。这些交织的需求使图像到海报成为一种多维过程,需在图像提示控制下,将实体保留编辑与概念驱动创建进行耦合。为应对这些挑战,我们提出了PosterOmni—a通用艺术海报创建框架,通过高效的数据蒸馏奖励管线,挖掘基础编辑模型在多任务图像到海报生成中的潜能。PosterOmni通过一个高效的数据蒸馆奖励管线将两个阶段整合于单个系统中:(i)构建覆盖六种任务类型的多场景图像到海报数据集,涵盖基于实体的创建与基于概念的创建;(ii)在监督微调中在局部专家与全局专家之间进行知识蒸馏;(iii)应用统一的PosterOmni奖励反馈,以在所有任务中联合对视觉实体保留和审美偏好进行对齐。此外,我们建立了PosterOmni-Bench,用于评估局部编辑和全局创建。大量实验表明,PosterOmni显著提升了参考依存性、全局构图质量和审美和谐度,超越了所有开源基线,甚至优于几种专有系统。

关键词

引用

@article{arxiv.2602.12127,
  title  = {PosterOmni: Generalized Artistic Poster Creation via Task Distillation and Unified Reward Feedback},
  author = {Sixiang Chen and Jianyu Lai and Jialin Gao and Hengyu Shi and Zhongying Liu and Tian Ye and Junfeng Luo and Xiaoming Wei and Lei Zhu},
  journal= {arXiv preprint arXiv:2602.12127},
  year   = {2026}
}