Morpheus：文本驱动的 3D 高斯泼溅形状与色彩风格化
计算机视觉与模式识别
2025-03-19 v2
摘要
使用新视角合成来探索真实世界空间充满乐趣，而以不同风格重新构想这些世界则增添了另一层兴奋感。风格化的世界还可用于训练数据有限的下游任务，并满足扩展模型训练分布的需求。当前大多数新视角合成风格化技术缺乏令人信服地改变几何形状的能力。这是因为任何几何形状的改变都需要增强风格强度，而为保持风格化的稳定性和一致性，风格强度通常设有上限。在本研究中，我们提出了一种新的自回归 3D 高斯泼溅风格化方法。作为该方法的一部分，我们提出了一种新的 RGBD 扩散模型，能够控制外观和形状风格化的强度。为确保风格化帧之间的一致性，我们结合使用了新型深度引导交叉注意力、特征注入以及以合成帧为条件的 Warp ControlNet，用于指导新帧的风格化。我们通过广泛的定性结果、定量实验和用户研究验证了该方法。代码已开源。
引用
@article{arxiv.2503.02009,
title = {Morpheus: Text-Driven 3D Gaussian Splat Shape and Color Stylization},
author = {Jamie Wynn and Zawar Qureshi and Jakub Powierza and Jamie Watson and Mohamed Sayed},
journal= {arXiv preprint arXiv:2503.02009},
year = {2025}
}