FluidNexus: 从单视频重建和预测 3D 流体
计算机视觉与模式识别
2025-07-11 v2
摘要
我们研究从单视频重建和预测 3D 流体的外观和速度。当前方法需要多视图视频进行流体重建。我们提出了 FluidNexus，一种新型框架，通过桥接视频生成和物理仿真来解决此问题。我们的关键洞察是合成多个新视角视频作为重建的参考。FluidNexus 包含两个关键组件：（1）一种新的视角视频合成器，将帧级视角合成与视频扩散细化相结合，用于生成真实视频；（2）一种物理集成的粒子表示，将可微分仿真与渲染耦合，同时协助 3D 流体重建和预测。为评估我们的方法，我们收集了两个新的真实世界流体数据集，包含带纹理的背景和物体交互。我们的方法实现了从单个流体视频中进行动态新视角合成、未来预测和交互仿真。项目网站: https://yuegao.me/FluidNexus。
关键词
引用
@article{arxiv.2503.04720,
title = {FluidNexus: 3D Fluid Reconstruction and Prediction from a Single Video},
author = {Yue Gao and Hong-Xing Yu and Bo Zhu and Jiajun Wu},
journal= {arXiv preprint arXiv:2503.04720},
year = {2025}
}
备注
CVPR 2025 (oral). The first two authors contributed equally. Project website: https://yuegao.me/FluidNexus