JIT-Masker：用于背景抠图的高效在线蒸馏
计算机视觉与模式识别
2020-06-12 v1 机器学习
摘要
我们设计了一个用于日常使用的实时人像抠图流水线，特别是用于视频会议中的“虚拟背景”。现有的分割与抠图方法优先考量准确率与质量而非吞吐量与效率，而我们的流水线通过对输入视频流采用在线蒸馏，实现了以可控量的准确率换取更好吞吐量。我们构建了自身在各种场景下的模拟视频通话数据集，并表明在非 GPU 加速环境下，我们的方法相较基于显著性检测的流水线实现了 5 倍加速，同时给出更高质量的结果。我们证明了在线蒸馏方法可作为通用消费级产品中的“虚拟背景”工具切实可行地工作。我们的公开实现位于 https://github.com/josephch405/jit-masker。
引用
@article{arxiv.2006.06185,
title = {JIT-Masker: Efficient Online Distillation for Background Matting},
author = {Jo Chuang and Qian Dong},
journal= {arXiv preprint arXiv:2006.06185},
year = {2020}
}