基于超高清协同录制系统的自动相机控制与导播
计算机视觉与模式识别
2022-08-11 v1 多媒体
摘要
从多个相机角度捕捉事件可为观众提供该事件最完整且有趣的画面。为适于广播，需要人工导播在每一时刻决定展示什么。随着相机角度数量增加，这会变得繁琐。全景或广角相机的引入使得事件能被更完整地捕捉，也让导播更难选取好的镜头。本文提出了一种系统，给定事件的多个超高清视频流，能生成视觉愉悦的镜头序列，成功跟随事件的相关动作。由于算法为通用目的，可应用于大多数包含人的场景。所提方法支持实时广播所需的在线处理，以及以相机操作为优先时的离线处理。目标检测用于检测输入流中的人及其他感兴趣对象。检测到的感兴趣人物，连同基于电影惯例的一组规则，用于确定展示哪路视频流以及该流中虚拟取景的部分。用户可提供若干设定以决定这些规则如何被解释。系统能通过去除镜头畸变来处理不同广角视频流输入。通过用户研究展示，在多种不同场景下，所提自动导播能够以美学上令人愉悦的视频构图与类人的镜头切换行为捕捉事件。
引用
@article{arxiv.2208.05213,
title = {Automatic Camera Control and Directing with an Ultra-High-Definition Collaborative Recording System},
author = {Bram Vanherle and Tim Vervoort and Nick Michiels and Philippe Bekaert},
journal= {arXiv preprint arXiv:2208.05213},
year = {2022}
}