基于背景匹配的自适应背景抠图

由于抠图问题难以求解，许多方法借助某种辅助手段来获取高质量 alpha 抠图。绿幕抠图方法依赖物理设备。基于三元图的方法将人工交互作为外部输入。基于背景的方法需要预先拍摄的静态背景。这些方法不够灵活便捷，难以广泛使用。无三元图方法灵活，但在复杂视频应用中不稳定。为了在真实应用中兼具稳定与灵活，我们提出一种自适应背景抠图方法。用户首先自由移动相机拍摄视频，随后再拍摄背景视频，粗略覆盖先前拍摄的区域。我们使用动态背景视频而非静态背景以实现精确抠图。所提方法因不再受静态相机与背景限制，可在任意场景便捷使用。为实现该目标，我们利用背景匹配网络从动态背景中逐帧寻找最佳匹配背景帧。接着，使用鲁棒语义估计网络估计粗 alpha 抠图。最后，依据粗 alpha 抠图裁剪并缩放目标区域，估计最终精确 alpha 抠图。实验中，所提方法性能可与最先进抠图方法相媲美。