基于跨帧引导的对象感知视频 Matting
计算机视觉与模式识别
2025-03-04 v1
摘要
最近，越来越多关注基于无描绘（trimap-free）方法的人类视频 Matting 任务，因其显示出良好的性能。然而，这些方法仍因缺乏确定性的前景-背景线索而受限，影响了其在时间上持续识别和定位前景目标以及挖掘细粒度细节的能力。本文提出一种无描绘的对象感知视频 Matting（OAVM）框架，能够感知不同的对象，从而实现对前景对象的联合识别和边缘细节的细化。具体而言，本文提出对象引导的校正与细化（OGCR）模块，采用跨帧引导将对象级别的实例信息聚合到像素级别的细节特征中，以促进两者的协同。此外，我们设计了顺序前景合并数据增强策略，以多样化的顺序情景增强网络对对象辨识的能力。广泛的在最新广泛使用的合成和真实基准数据集上的实验表明，我们的 OAVM 在仅提供初始粗糙掩码的情况下即可实现领先的性能。
关键词
引用
@article{arxiv.2503.01262,
title = {Object-Aware Video Matting with Cross-Frame Guidance},
author = {Huayu Zhang and Dongyue Wu and Yuanjie Shao and Nong Sang and Changxin Gao},
journal= {arXiv preprint arXiv:2503.01262},
year = {2025}
}