AnimateScene:任意场景下的可相机控制动画
计算机视觉与模式识别
2026-03-02 v2
摘要
最近的3D场景重建和4D人体动画技术拓宽了应用范围,但将两者集成仍然困难。关键挑战包括在人体运动期间在合理位置和尺度上放置人物且避免穿透、在人体和背景之间对齐光照和风格,以及处理动态相机轨迹。我们提出了 AnimateScene,一个统一框架解决上述问题。首先,一个精确的放置模块自动确定真实的3D位置并防止运动期间的碰撞。其次,我们提出了一种无需训练的风格对齐方法,使4D人体匹配背景照明和外观,实现连贯的合成。最后,我们设计了一种联合后重建方法,集成相机轨迹,用于生成平滑、富有视觉吸引力的运动视频。跨越多样场景和动作的实验表明,AnimateScene 生成的动态结果在几何细节和强时空一致性方面表现优异。项目页面可访问 https://whynothaha.github.io/AnimateScene/AnimateScene.html。
引用
@article{arxiv.2508.05982,
title = {AnimateScene: Camera-controllable Animation in Any Scene},
author = {Qingyang Liu and Bingjie Gao and Weiheng Huang and Jun Zhang and Zhongqian Sun and Yang Wei and Fengrui Liu and Zelin Peng and Qianli Ma and Shuai Yang and Zhaohe Liao and Haonan Zhao and Li Niu},
journal= {arXiv preprint arXiv:2508.05982},
year = {2026}
}
备注
Accepted by ICASSP 2026