360度视频的联合稳定与定向

360°视频为观众提供沉浸式体验，使其可通过转头自由探索世界。然而，制作高质量360°视频内容颇具挑战，因为观众可能因朝向错误而错过重要事件，或看到破坏沉浸感的事物，如拼接伪影与摄制组。我们利用并非所有方向被观察的概率均等这一事实；由于人体工学限制，多数观众更可能看到位于“正北”即前方的内容。因此我们提出360°视频定向，在产生平滑相机运动的同时，联合优化视频以使重要事件朝向观众前方、视觉杂乱位于其后。与传统视频不同，观众仍可按需探索空间，但知晓最重要的内容很可能在前方。约束可由用户引导——直接在等距柱状投影上添加或通过VR头显观看时记录“引导”视角方向，或自动计算，如通过视觉显著性或是前向运动方向。为此，我们提出一种专为360°视频设计的新型运动估计技术，其在广角视频上优于常用的五点算法。此外，我们将定向问题表述为一个优化问题，其中球面扭曲的新参数化使我们能校正一定程度的视差效应。我们将本方法与近期仅稳定及将360°视频转为窄视场视频的方法进行比较。