ArtifactWorld:通过视频生成模型扩展 3D 高斯溅写修复
计算机视觉与模式识别
2026-04-15 v1
摘要
3D 高斯溅写(3DGS)提供高保真实时渲染,但在稀疏视图约束下 suffer from 几何和光学退化。当前的生成式修复方法常受限于temporal coherence 不足、缺乏显式空间约束以及缺乏大规模训练数据,导致多视图不一致、几何幻觉错误以及对多样化真实世界 artifact 分布的泛化能力有限。为此,本文提出 ArtifactWorld,一个通过系统性数据扩充和同质双模型范式解决 3DGS artifact 修复的框架。为缓解数据瓶颈,我们建立了 3DGS artifacts 的细粒度现象分类学,并构建了 107.5K 条多样化成对视频剪辑的全面训练集以增强模型鲁棒性。从架构上看,我们将修复过程统一到 video diffusion 主干网络中,利用等距预测器通过 artifact heatmap localizes 结构缺陷。该 heatmap 然后通过 Artifact-Aware Triplet Fusion mechanism 指导修复,实现在 native self-attention 中的精确、强度导向的时空修复。广泛的实验表明,ArtifactWorld 在稀疏新视图合成和稳健 3D 重建中实现了最新性能。代码和数据集将公开。
关键词
引用
@article{arxiv.2604.12251,
title = {ArtifactWorld: Scaling 3D Gaussian Splatting Artifact Restoration via Video Generation Models},
author = {Xinliang Wang and Yifeng Shi and Zhenyu Wu},
journal= {arXiv preprint arXiv:2604.12251},
year = {2026}
}
备注
The second author is the corresponding author