玫瑰的诞生与死亡
计算机视觉与模式识别
2025-06-09 v2 图形学
摘要
我们研究从预训练2D基础模型生成时序物体内在属性（object intrinsics）的难题，即生成随时间演化的物体几何、反射率和纹理序列，如盛开的玫瑰。不同于传统3D建模和动画技术需大量人工工作与专业知识，本文引入一种方法，从预训练2D扩散模型中提取信号以生成此类资产。为确保物体内在属性的时间一致性，我们提出基于神经模板的时序状态引导蒸馏，模板自动从自监督学习的图像特征中派生。我们的方法可为多种自然现象生成高质量的时序物体内在属性，并实现从任意视角、任意环境光照条件下、在对象生命周期的任意时刻，对这些动态对象的采样与可控渲染。项目网页：https://chen-geng.com/rose4d
引用
@article{arxiv.2412.05278,
title = {Birth and Death of a Rose},
author = {Chen Geng and Yunzhi Zhang and Shangzhe Wu and Jiajun Wu},
journal= {arXiv preprint arXiv:2412.05278},
year = {2025}
}
备注
CVPR 2025 Oral. Project website: https://chen-geng.com/rose4d