基于评分蒸馈的3D高斯溅射有效拖拽编辑方法
图形学
2025-05-27 v6 计算机视觉与模式识别
摘要
近期3D场景编辑的快速发展推动了生成模型的应用。现有方法通常利用生成模型对3D表示（如3D高斯溅射3DGS）进行文本导向编辑，但这些方法常受限于纹理修改，难以处理如编辑角色头部转向等几何变更。此外，这些方法缺乏对编辑结果空间位置的精准控制，因为语言难以精确描述编辑范围。为克服这些限制，我们引入DYG（Drag Your Gaussian），一种有效的3D拖拽编辑方法。它通过输入3D掩码和控制点对，使用户便捷指定编辑区域及拖拽方向，从而实现对编辑范围的精确控制。DYG整合了隐式三平面表示的优势，构建编辑结果的几何框架，有效克服了3DGS在所需编辑区域稀疏性导致的次优编辑结果问题。此外，我们通过提出的拖拽基于SDS损失函数，将拖拽式潜在扩散模型纳入方法，实现灵活、多视角一致且精细的编辑。大量实验表明，DYG在控制点提示下展现出有效的拖拽编辑能力，凭借编辑效果和质量，在定性和定量分析上均优于其他基线方法。访问我们的项目页面 https://quyans.github.io/Drag-Your-Gaussian。
引用
@article{arxiv.2501.18672,
title = {Drag Your Gaussian: Effective Drag-Based Editing with Score Distillation for 3D Gaussian Splatting},
author = {Yansong Qu and Dian Chen and Xinyang Li and Xiaofan Li and Shengchuan Zhang and Liujuan Cao and Rongrong Ji},
journal= {arXiv preprint arXiv:2501.18672},
year = {2025}
}
备注
Visit our project page at https://quyans.github.io/Drag-Your-Gaussian