MagicEdit:高保真且时间一致的视频编辑
计算机视觉与模式识别
2023-08-29 v1
摘要
在本报告中,我们提出 MagicEdit,一个令人惊讶地简单却有效的文本引导视频编辑任务解决方案。我们发现,通过在训练期间显式解耦内容、结构与运动信号的学习,可实现高保真且时间一致的视频到视频转换。这与大多数试图在单一框架内联合建模外观与时间表示的现有方法相矛盾,我们认为后者会导致逐帧质量下降。尽管简单,我们展示了 MagicEdit 支持多种下游视频编辑任务,包括视频风格化、局部编辑、video-MagicMix 和视频外绘。
引用
@article{arxiv.2308.14749,
title = {MagicEdit: High-Fidelity and Temporally Coherent Video Editing},
author = {Jun Hao Liew and Hanshu Yan and Jianfeng Zhang and Zhongcong Xu and Jiashi Feng},
journal= {arXiv preprint arXiv:2308.14749},
year = {2023}
}
备注
Project page: https://magic-edit.github.io/