TrajectoryMover:视频中对象轨迹的生成性运动
计算机视觉与模式识别
2026-05-20 v3
摘要
生成式视频编辑已实现对短视频剪辑的几种直观编辑操作,这些操作以前难以实现,尤其适用于非专业编辑人员。现有方法侧重于指定对象在视频中的 3D 或 2D 运动轨迹,或改变对象或场景的外观,同时保持视频的合理性和身份。然而,移动对象 3D 运动轨迹的方法尚未出现,即在保持其相对 3D 运动的前提下移动对象。主要挑战在于获取此情景下的配对视频数据。以往方法通常依赖巧妙的数据生成方法从未配对的视频中构造合理的配对数据,但当视频对中任一视频难以从另一视频中轻松构造时,这种方法会失败。相反,我们引入 TrajectoryAtlas,一个用于大规模合成配对视频数据的新型数据生成管道,以及基于该数据的视频生成器 TrajectoryMover。我们展示了这成功地实现了对象轨迹的生成性运动。项目页面:https://chhatrekiran.github.io/trajectorymover
引用
@article{arxiv.2603.29092,
title = {TrajectoryMover: Generative Movement of Object Trajectories in Videos},
author = {Kiran Chhatre and Hyeonho Jeong and Yulia Gryaditskaya and Christopher E. Peters and Chun-Hao Paul Huang and Paul Guerrero},
journal= {arXiv preprint arXiv:2603.29092},
year = {2026}
}
备注
15 pages, 9 figures. Project page: https://chhatrekiran.github.io/trajectorymover