中文

SpecGen:基于光谱-空间三平面聚合的神经光谱 BRDF 生成

计算机视觉与模式识别 2025-12-04 v2

摘要

跨波长合成光谱图像对于实现高度真实的渲染至关重要。不同于传统的光谱升频方法将 RGB 图像转换为光谱图像,本文提出了 SpecGen 方法,从单个球体的 RGB 图像生成光谱双向反射分布函数(BRDF),从而实现在对应材料覆盖的任意照明条件和形状下进行光谱图像渲染。光谱 BRDF 生成的关键挑战在于测量光谱 BRDF 数据的稀缺。为此,我们提出了光谱-空间三平面聚合(SSTA)网络,该网络在波长和入射-出射方向之间建模反射响应,使训练策略能够利用丰富的 RGB BRDF 数据来增强光谱 BRDF 的生成。实验表明,我们的方法在有限光谱数据下准确重建光谱 BRDF,并在超光谱图像重建中超越最先进的方法,PSNR 提升了 8 dB。代码和数据将在接受后发布。

关键词

引用

@article{arxiv.2508.17316,
  title  = {SpecGen: Neural Spectral BRDF Generation via Spectral-Spatial Tri-plane Aggregation},
  author = {Zhenyu Jin and Wenjie Li and Zhanyu Ma and Heng Guo},
  journal= {arXiv preprint arXiv:2508.17316},
  year   = {2025}
}