TAPESTRY：从几何到外观通过一致的旋转视频
计算机视觉与模式识别
2026-03-19 v1
摘要
自动为无纹理 3D 模型生成照片级逼真且自洽的外观是数字内容创建中的关键挑战。大规模视频生成模型的发展提供了一种自然方法：直接合成 360 度旋转转盘视频 (TTV)，既可作为高质量的动态预览，也可作为驱动纹理合成和神经渲染的中间表示。然而，现有的通用视频扩散模型在几何一致性和外观稳定性方面难以在完整视角范围内保持严格一致，使其输出不适用于高质量 3D 重建。为此，我们引入 TAPESTRY，一个用于生成以显式 3D 几何为条件的高保真 TTV 的框架。我们将 3D 外观生成任务重新表述为几何条件视频扩散问题：给定 3D 网格，我们首先渲染并编码多模态几何特征，以像素级精度约束视频生成过程，从而实现高质量且一致的 TTV 的创建。基于此，我们还设计了一种用于从 TTV 输入进行下游重建的方法，特点是具有 3D 感知填充的多阶段管道。通过旋转模型并执行上下文感知的二次生成，该管道有效地完成自遮挡区域，以实现完全表面覆盖。TAPESTRY 生成的视频不仅是高质量的动态预览，还是可无缝回投影到 UV 纹理或用于监督类似 3DGS 的神经渲染方法的可靠、3D 感知的中间表示。这使得从无纹理网格自动创建生产就绪的完整 3D 资产成为可能。实验结果表明，我们的方法在视频一致性和最终重建质量方面均优于现有方法。
引用
@article{arxiv.2603.17735,
title = {TAPESTRY: From Geometry to Appearance via Consistent Turntable Videos},
author = {Yan Zeng and Haoran Jiang and Kaixin Yao and Qixuan Zhang and Longwen Zhang and Lan Xu and Jingyi Yu},
journal= {arXiv preprint arXiv:2603.17735},
year = {2026}
}