中文

SwitchLight:用于人像重照明的物理驱动架构与预训练框架协同设计

计算机视觉与模式识别 2024-03-01 v1

摘要

我们介绍了一种用于人像重照明的协同设计方法,该方法结合了物理引导的架构与预训练框架。基于 Cook-Torrance 反射模型,我们精心配置了架构设计以精确模拟光与表面的相互作用。此外,为克服高质量 Lightstage 数据稀缺的限制,我们开发了一种自监督预训练策略。这种精确物理建模与扩展训练数据集的新颖结合,确立了重照明真实感的新基准。

关键词

引用

@article{arxiv.2402.18848,
  title  = {SwitchLight: Co-design of Physics-driven Architecture and Pre-training Framework for Human Portrait Relighting},
  author = {Hoon Kim and Minje Jang and Wonjun Yoon and Jisoo Lee and Donghyun Na and Sanghyun Woo},
  journal= {arXiv preprint arXiv:2402.18848},
  year   = {2024}
}

备注

CVPR2024. Live demos available at https://www.beeble.ai/