星空下的舞动：星光下的视频去噪
计算机视觉与模式识别
2022-04-11 v1 图像与视频处理
摘要
由于光子计数极低，低光成像极具挑战性。使用高灵敏度 CMOS 相机，目前已可在夜间月光下（0.05–0.3 lux 照度）拍摄视频。在本文中，我们首次展示了星光下（无月光，<0.001 lux）的逼真视频。为此，我们开发了一种 GAN 调优的基于物理的噪声模型，以更准确地表征最低光照水平下的相机噪声。利用该噪声模型，我们结合模拟的含噪视频片段与真实含噪静态图像训练了一个视频去噪器。我们在约 0.6–0.7 毫勒克斯、无主动照明的条件下采集了具有显著运动的 5–10 fps 视频数据集。与替代方法相比，我们在最低光照水平下实现了更好的视频质量，首次展示了星光下的逼真视频去噪。
引用
@article{arxiv.2204.04210,
title = {Dancing under the stars: video denoising in starlight},
author = {Kristina Monakhova and Stephan R. Richter and Laura Waller and Vladlen Koltun},
journal= {arXiv preprint arXiv:2204.04210},
year = {2022}
}
备注
CVPR 2022. Project page: https://kristinamonakhova.com/starlight_denoising/