响应式动作驱动的视频合成

我们提出了一种技术，旨在实现一种新的表达媒介，其中视频元素可以被循环播放、合并和交互式触发。与音频类似，视频易于从现实世界中采样，但难以分割成干净的可重用元素。重用视频片段意味着进行非线性编辑并与新素材合成。新的上下文决定了片段必须准备得多么细致，因此我们的端到端方法支持预览和轻松迭代。我们将静态摄像机拍摄的视频转换为可循环的序列，并根据简单的最终用户请求进行合成。这很困难，因为 a) 用户本质上希望对合成视频内容进行语义级别的控制，以及 b) 自动循环查找很脆弱，留给用户通过解决问题来改进的机会有限。我们提出了一种人在回路中的系统，其中增加投入能让用户获得逐步增强的创作控制权。艺术家帮助我们评估了我们的触发界面如何用于视频创作和视频表演。