中文

针对不良成像条件下的深度估计:基于事件的 Depth Anything 适配方法

计算机视觉与模式识别 2026-01-06 v1

摘要

在动态和不良照明条件下进行鲁棒的深度估计,对机器人系统至关重要。目前,深度基础模型如 Depth Anything 在理想场景下取得了很好的成功,但在不良成像条件(如极端照明和运动模糊)下仍具挑战。这些退化会损坏帧相机的视觉信号,削弱帧基深度在空间和时间维度上的判别特征。通常,现有方法会融合事件相机,以利用其高动态范围和时间分辨率,以弥补被损坏的帧特征。然而,这类专业化融合模型主要在特定数据集上从头训练,无法继承基础模型固有的开放世界知识和鲁棒泛化能力。在本工作中,我们提出了 ADAE(event-guided spatiotemporal fusion framework for Depth Anything in degraded scenes),即为 Depth Anything 在不良场景下的事件引导时空融合框架。我们的设计受到两个关键洞察的指导:1)熵感知空间融合。我们采用信息熵策略自适应地合并帧基和事件基特征,以指示照明引起的退化。2)运动引导的时间校正。我们利用事件基的运动线索来校正模糊区域的模糊特征。在统一框架下,这两个组件彼此互补,共同增强了 Depth Anything 在不良成像条件下的表现。我们进行了大量实验以验证所提方法的优越性。我们将在接受录取后发布代码。

关键词

引用

@article{arxiv.2601.02020,
  title  = {Adapting Depth Anything to Adverse Imaging Conditions with Events},
  author = {Shihan Peng and Yuyang Xiong and Hanyu Zhou and Zhiwei Shi and Haoyue Liu and Gang Chen and Luxin Yan and Yi Chang},
  journal= {arXiv preprint arXiv:2601.02020},
  year   = {2026}
}

备注

This work has been submitted to the IEEE for possible publication