中文

S2ED:从故事到可执行描述,以实现一致性感知的故事插图

人工智能 2026-05-22 v1

摘要

多帧故事插图需要超越单图像文本到图像生成的长程一致性,包括叙事分解和持久性人物身份、布局和情感跨帧的保持。我们提出Story-to-Executable Descriptions (S2ED),一个无监督、模型中性、提示层框架,将完整故事转换为一序列显式、可编辑的可执行描述,以实现更一致的渲染。S2ED 坐标三个代理:分段叙事、ground canonical人物属性、丰富空间和情感线索,使可解释的prompt-carried状态传递和局部编辑成为可能,以在不重新训练生成器的情况下修复漂移。在Flintstones和Shakoo Maku上的实验表明,S2ED 在强大的提示、大型模型计划和一种参考训练方法之上,显著提升了序列层面的一致性和人物忠实度,无论是基于自动指标还是基于人类判断。我们还在儿童故事书的端到端故事到故事书系统中部署了S2ED,并附带一个补充视频。

关键词

引用

@article{arxiv.2605.22448,
  title  = {S2ED: From Story to Executable Descriptions for Consistency-Aware Story Illustration},
  author = {Sijing Yin and Jiamou Liu and Xiao Tang and Yaser Shakib and Qian Liu},
  journal= {arXiv preprint arXiv:2605.22448},
  year   = {2026}
}

备注

6 pages, 5 figures. Accepted by IEEE ICME 2026