Noise2Image:面向事件相机的噪声使能静态场景恢复
计算机视觉与模式识别
2025-06-17 v2 图像与视频处理
摘要
事件相机,也称为动态视觉传感器,是一种异步测量快速动态的新兴模态。事件相机捕获随时间变化的log-intensity作为事件流,通常无法测量强度本身;因此,它们仅用于动态场景成像。然而,随机光子到达引起的波动不可避免地会触发噪声事件,即使对于静态场景也是如此。虽然之前的工作集中在滤除这些不良噪声事件以提高信号质量,但我们发现,在光子噪声机制下,这些噪声事件与静态场景强度相关。我们分析了噪声事件的生成并建模了其与照度的关系。基于这一理解,我们提出了一种名为Noise2Image的方法,利用照度相关的噪声特性来恢复场景的静态部分,而这些部分对于事件相机来说原本是不可见的。我们实验性地收集了一个静态场景上的噪声事件数据集,用于训练和验证Noise2Image。我们的结果为事件相机仅从噪声事件中捕获静态场景提供了一种新颖方法,无需额外硬件。
引用
@article{arxiv.2404.01298,
title = {Noise2Image: Noise-Enabled Static Scene Recovery for Event Cameras},
author = {Ruiming Cao and Dekel Galor and Amit Kohli and Jacob L Yates and Laura Waller},
journal= {arXiv preprint arXiv:2404.01298},
year = {2025}
}