基于高斯溅射的零样本动态场景风格化
计算机视觉与模式识别
2025-01-08 v1
摘要
基于示例图像对动态场景进行风格化对各种现实应用（包括游戏、电影和增强与虚拟现实）至关重要。然而，在空间和时间维度上实现一致的风格化仍是一个重大挑战。大多数现有方法针对静态场景设计，常需为每个风格图像进行优化，限制了其适应性。我们引入 ZDySS，一个面向动态场景的零样本风格化框架，使我们的模型能够在推断时对以前未见过的风格图像进行泛化。我们的方法采用高斯溅射进行场景表示，将每个高斯与一个学习特征向量关联，用于渲染给定视图和时间戳的特征图。通过对学习特征向量而非渲染特征图应用风格迁移，我们增强了帧之间在时空上的一致性。我们的方法在测试于真实动态场景的实验中在性能和连贯性方面优于当前最先进的基线方法，成为实际应用的稳健解决方案。
引用
@article{arxiv.2501.03875,
title = {ZDySS -- Zero-Shot Dynamic Scene Stylization using Gaussian Splatting},
author = {Abhishek Saroha and Florian Hofherr and Mariia Gladkova and Cecilia Curreli and Or Litany and Daniel Cremers},
journal= {arXiv preprint arXiv:2501.03875},
year = {2025}
}