基于小波先验优化四维查找表的低光照视频增强
计算机视觉与模式识别
2024-09-16 v1 图像与视频处理
摘要
低光照视频增强对保持时空颜色一致性要求极高。因此，提高颜色映射的准确性并保持低延迟是一项挑战。基于此，我们提出将小波先验引入四维查找表（WaveLUT），在保持低延迟的同时，有效增强视频帧之间的颜色一致性和颜色映射的准确性。具体而言，我们利用小波低频域构建优化的查找先验，并通过设计的 Wavelet-prior 4D 查找表实现自适应增强效果。为了有效补偿低光照区域的先验损失，我们进一步探索了一种动态融合策略，该策略基于小波照明先验与目标强度结构之间的相关性自适应确定空间权重。此外，在训练阶段，我们设计了一种文本驱动的外观重建方法，通过多模态语义驱动的傅里叶频谱动态平衡亮度与内容。在广泛基准数据集上的大量实验表明，该方法有效增强了先前方法对颜色空间的感知能力，并在保持高效率的同时，实现了指标优良且面向感知的实时增强。
引用
@article{arxiv.2409.08585,
title = {Optimizing 4D Lookup Table for Low-light Video Enhancement via Wavelet Priori},
author = {Jinhong He and Minglong Xue and Wenhai Wang and Mingliang Zhou},
journal= {arXiv preprint arXiv:2409.08585},
year = {2024}
}