基于 GPU 加速色彩校正与帧变形的实时视频拼接
计算机视觉与模式识别
2023-08-21 v1 人工智能
图形学
摘要
传统图像拼接侧重于单幅全景帧，未考虑视频中的时空一致性。当将直接的图像拼接方法应用于视频拼接任务时，会引起时间闪烁和色彩不一致。此外，不准确的相机参数会导致图像变形中的伪影。在本文中，我们提出了一个实时系统，将多个视频序列拼接成全景视频，该系统基于 GPU 加速的色彩校正和帧变形，且无需精确的相机参数。我们扩展了传统的 2D 矩阵（2D-M）色彩校正方法，并提出了一种时空 3D 矩阵（3D-M）色彩校正方法，用于重叠局部区域，通过对全局帧使用分段函数进行在线色彩平衡。此外，我们使用由粗略相机标定给出的成对单应矩阵进行全局变形，随后基于光流进行精确的局部变形。实验结果表明，我们的系统能够实时生成高质量全景视频。
引用
@article{arxiv.2308.09209,
title = {GPU Accelerated Color Correction and Frame Warping for Real-time Video Stitching},
author = {Lu Yang and Zhenglun Kong and Ting Li and Xinyi Bai and Zhiye Lin and Hong Cheng},
journal= {arXiv preprint arXiv:2308.09209},
year = {2023}
}