基于大型多模态模型的单图像反射移除 SIRR-LMM
计算机视觉与模式识别
2026-02-06 v2 人工智能
图形学
摘要
玻璃表面会产生反射和折射光的复杂相互作用，使得单图像反射移除 (SIRR) 具有挑战性。现有数据集要么在合成数据中缺乏物理真实性，要么在真实捕获数据规模不足。我们引入了一个合成数据集生成框架，通过对真实背景图像上的 3D 玻璃模型进行路径追踪，以创建物理上准确的反射场景，包括 varied glass properties、camera settings 和后处理效果。为了利用大型多模态模型 (LMM) 的能力，我们将图像图层拼接为单个组合输入，应用联合描述，并使用任务特定的 LoRA 进行微调，而不是进行全参数训练。这使我们能够实现比现有方法在反射移除和分离方面更好的性能。
引用
@article{arxiv.2601.07209,
title = {SIRR-LMM: Single-image Reflection Removal via Large Multimodal Model},
author = {Yu Guo and Zhiqiang Lao and Xiyun Song and Yubin Zhou and Heather Yu},
journal= {arXiv preprint arXiv:2601.07209},
year = {2026}
}
备注
12 pages, 14 figures, accepted in WACVW 2026