中文

Veta-GS:面向热红外新视角合成的视角相关可变形3D高斯泼溅

计算机视觉与模式识别 2025-05-27 v1

摘要

近年来,基于热红外(TIR)成像的3D高斯泼溅(3D-GS)在新视角合成中受到关注,并展现出实时渲染能力。然而,利用热红外图像进行新视角合成会受到传输效应、发射率和低分辨率的影响,导致渲染图像出现悬浮伪影和模糊效应。为了解决这些问题,我们提出了 Veta-GS,它利用视角相关的形变场和热特征提取器(TFE)来精确捕捉细微的热变化并保持鲁棒性。具体而言,我们设计了利用相机位置和观察方向的视角相关形变场,以捕捉热变化。此外,我们引入了热特征提取器(TFE)和 MonoSSIM 损失,综合考虑外观、边缘和频率以保持鲁棒性。在 TI-NSD 基准上的大量实验表明,我们的方法取得了优于现有方法的性能。

关键词

引用

@article{arxiv.2505.19138,
  title  = {Veta-GS: View-dependent deformable 3D Gaussian Splatting for thermal infrared Novel-view Synthesis},
  author = {Myeongseok Nam and Wongi Park and Minsol Kim and Hyejin Hur and Soomok Lee},
  journal= {arXiv preprint arXiv:2505.19138},
  year   = {2025}
}