SEE:始终看清一切——基于事件的宽光域图像自适应亮度调整
计算机视觉与模式识别
2025-10-02 v2
摘要
事件相机具有超过 的高动态范围,显著优于传统嵌入式相机,能够在各种光照条件(包括低光照和高光照情况)下稳健地记录详细的动态变化信息。然而,最近关于利用事件数据的研究主要集中在低光照图像增强上,忽略了在更广泛光照条件(如正常或高照度)下的图像增强和亮度调整。基于此,我们提出了一个新的研究问题:如何利用事件来增强并自适应地调整在宽光照条件下捕获的图像的亮度?为了研究这个问题,我们首先收集了一个新数据集 SEE-600K,包含 202 个场景下的 610,126 张图像及对应的事件,每个场景平均具有四种光照条件,照度变化超过 1000 倍。随后,我们提出了一个框架,该框架有效利用事件通过提示平滑调整图像亮度。我们的框架通过传感器模式捕获颜色,使用交叉注意力将事件建模为亮度字典,并调整图像的动态范围以形成宽光域表示(BLR),随后基于亮度提示在像素级进行解码。实验结果表明,我们的方法不仅在低光照增强数据集上表现良好,而且在使用 SEE-600K 数据集进行更宽光域图像增强时也表现出稳健的性能。此外,我们的方法实现了像素级亮度调整,为后处理提供了灵活性,并启发了更多的成像应用。数据集和源代码已公开于:https://github.com/yunfanLu/SEE。
引用
@article{arxiv.2502.21120,
title = {SEE: See Everything Every Time -- Adaptive Brightness Adjustment for Broad Light Range Images via Events},
author = {Yunfan Lu and Xiaogang Xu and Hao Lu and Yanlin Qian and Pengteng Li and Huizai Yao and Bin Yang and Junyi Li and Qianyi Cai and Weiyu Guo and Hui Xiong},
journal= {arXiv preprint arXiv:2502.21120},
year = {2025}
}
备注
https://github.com/yunfanLu/SEE