Veta-GS:面向热红外新视角合成的视角相关可变形3D高斯泼溅
计算机视觉与模式识别
2025-05-27 v1
摘要
近年来,基于热红外(TIR)成像的3D高斯泼溅(3D-GS)在新视角合成中受到关注,并展现出实时渲染能力。然而,利用热红外图像进行新视角合成会受到传输效应、发射率和低分辨率的影响,导致渲染图像出现悬浮伪影和模糊效应。为了解决这些问题,我们提出了 Veta-GS,它利用视角相关的形变场和热特征提取器(TFE)来精确捕捉细微的热变化并保持鲁棒性。具体而言,我们设计了利用相机位置和观察方向的视角相关形变场,以捕捉热变化。此外,我们引入了热特征提取器(TFE)和 MonoSSIM 损失,综合考虑外观、边缘和频率以保持鲁棒性。在 TI-NSD 基准上的大量实验表明,我们的方法取得了优于现有方法的性能。
引用
@article{arxiv.2505.19138,
title = {Veta-GS: View-dependent deformable 3D Gaussian Splatting for thermal infrared Novel-view Synthesis},
author = {Myeongseok Nam and Wongi Park and Minsol Kim and Hyejin Hur and Soomok Lee},
journal= {arXiv preprint arXiv:2505.19138},
year = {2025}
}