3D 高斯溶解的人类主观感知优化
计算机视觉与模式识别
2026-03-25 v1 机器学习
图像与视频处理
摘要
尽管 3D 高斯溶解 (3DGS) 方法的最终输出是供人类观看的,但它们往往依赖于 ad-hoc 像素级损失的组合,导致渲染结果模糊。为此,我们系统地探索了 3DGS 的感知优化策略,通过在多样化的失真损失集合中进行搜索。我们进行了规模巨大的人类主观研究,涉及 39,320 条成对评级,覆盖多个数据集和 3DGS 框架。我们称之为 WD-R 的正则化 Wasserstein 失真版本成为明显的获胜者,能够在不增加溶解点数量的前提下恢复细节纹理。WD-R 相对于原始 3DGS 损失被偏好者偏好超过 ,相对于当前最佳方法 Perceptual-GS 偏好约 。WD-R 也始终在各种数据集上实现 state-of-the-art LPIPS、DISTS 和 FID 分数,并在最新框架(如 Mip-Splatting 和 Scaffold-GS)中普遍适用,通过将原始损失替换为 WD-R,能够在类似资源预算(Mip-Splatting 的溶解点数量,Scaffold-GS 的模型大小)下持续提升感知质量,并导致重建结果被人类评审者分别偏好 和 。我们还发现这一特性也适用于 3DGS 场景压缩任务,实现约 50% 的比特率在相当的感知指标性能下节省。
引用
@article{arxiv.2603.23297,
title = {Drop-In Perceptual Optimization for 3D Gaussian Splatting},
author = {Ezgi Ozyilkan and Zhiqi Chen and Oren Rippel and Jona Ballé and Kedar Tatwawadi},
journal= {arXiv preprint arXiv:2603.23297},
year = {2026}
}
备注
Project page: https://apple.github.io/ml-perceptual-3dgs