CheapNVS：实时移动端窄基准新视角合成
计算机视觉与模式识别
2025-01-27 v1
摘要
单视图新视角合成（NVS）是由于其惯性问题而备受困扰的，往往需要大型计算密集型方法才能获得可观结果。本文提出CheapNVS：一种基于新颖高效多编码器/解码器设计的全端到端窄基准单视图NVS方法。CheapNVS首先用轻量可学习模块近似繁琐的3D图像变形，这些模块依据目标视角的相机姿态嵌入进行条件化，然后并行对遮挡区域进行插值，以实现显著的性能提升。训练于Open Images数据集子集后，CheapNVS在虽快10倍、仅占内存6%的情况下超越了最先进的方法。此外，CheapNVS可在移动设备上流畅运行，在三星Tab 9+上实现30 FPS以上。
引用
@article{arxiv.2501.14533,
title = {CheapNVS: Real-Time On-Device Narrow-Baseline Novel View Synthesis},
author = {Konstantinos Georgiadis and Mehmet Kerim Yucel and Albert Saa-Garriga},
journal= {arXiv preprint arXiv:2501.14533},
year = {2025}
}
备注
Accepted to ICASSP 2025