观看即编辑：利用注视的视频重定向

我们提出了一种新方法，通过保留经眼动追踪发现的显著场景内容，将视频最优重定向至不同宽高比的各种显示器。我们的算法通过优化原始视频中裁剪窗口的路径，执行剪切、平移和缩放操作进行编辑，同时力求（i）保留显著区域，以及（ii）遵循电影摄影原则。我们的方法（a）与内容无关，因为采用相同方法可重新编辑广角视频录制或静态/移动摄像机拍摄的特写电影序列，且（b）与视频长度无关，原则上可一次性重新编辑整部电影。我们的算法包含两步。第一步利用注视转移线索，通过动态规划检测原始视频中需引入新剪切的时间戳。后续步骤优化裁剪窗口路径（以创建平移和缩放效果），同时考虑原始剪切和新剪切。裁剪窗口路径设计为包含最大注视信息，并由分段恒定、线性和抛物线段组成。它通过L(1)正则化凸优化获得，确保平滑的观看体验。我们在多种视频上测试了该方法，并在计算复杂度和定性方面均展示出优于最先进方法的显著改进。一项由16名用户参与的研究证实，与注视驱动重编辑和信箱式方法相比，我们的方法带来更优观看体验，尤其针对广角静态摄像机录制。