中文

Wan-Animate:基于整体复制的统一人物动画与替换框架

计算机视觉与模式识别 2025-09-18 v1

摘要

我们引入Wan-Animate,一个用于人物动画和替换的统一框架。给定一个人物图像和参考视频,Wan-Animate可以精确复制视频中人物的表情和动作,以生成高保真人物视频。或者,它可以将动画化的人物整合到参考视频中,以替换原始人物,复制场景的照明和色调以实现无缝的环境集成。Wan-Animate基于Wan模型构建。为将其适用于人物动画任务,我们采用修改后的输入范式来区分参考条件和生成区域。该设计将多个任务统一为常见的符号表示。我们使用与空间对齐的骨骼信号复制身体动作,并从源图像中提取隐式面部特征以再现表情,实现对人物视频的高可控性和表达性。此外,为增强人物替换期间的环境集成,我们开发了一个辅助的Relighting LoRA模块。该模块在保持人物外观一致性的同时,应用适当的环境照明和色调。实验结果表明,Wan-Animate实现了最先进的性能。我们承诺开源模型权重及其源代码。

关键词

引用

@article{arxiv.2509.14055,
  title  = {Wan-Animate: Unified Character Animation and Replacement with Holistic Replication},
  author = {Gang Cheng and Xin Gao and Li Hu and Siqi Hu and Mingyang Huang and Chaonan Ji and Ju Li and Dechao Meng and Jinwei Qi and Penchong Qiao and Zhen Shen and Yafei Song and Ke Sun and Linrui Tian and Feng Wang and Guangyuan Wang and Qi Wang and Zhongjian Wang and Jiayu Xiao and Sheng Xu and Bang Zhang and Peng Zhang and Xindi Zhang and Zhe Zhang and Jingren Zhou and Lian Zhuo},
  journal= {arXiv preprint arXiv:2509.14055},
  year   = {2025}
}

备注

Project Page: https://humanaigc.github.io/wan-animate/