视频拼接应用中信息性重叠帧的主动标注
计算机视觉与模式识别
2021-01-01 v1
摘要
视频拼接需要位于序列中遥远时间点的重叠帧的配准，以确保重建场景的全局一致性。然而，此类长程对的完全自动配准在以下两方面存在困难：(i) 当图像配准本身困难时具有挑战性；(ii) 对于长序列，由于大量候选配准对而计算昂贵。本文中，我们引入一种用于序列中长程成对对应主动标注的高效框架。我们的框架建议图像对，这些图像对被认为对神谕代理（例如人类用户或可靠匹配算法）具有信息性，该代理在每个建议对上提供视觉对应。信息性对依据基于原则性标注奖励与两个互补且可在线适应的帧重叠模型的迭代策略检索。除高效构建拼接图外，我们的框架还作为副产品提供可用于评估或学习目的的地面真值地标对应。我们通过合成序列、公开可用的航拍成像数据集以及胎儿手术中胎盘拼接的临床数据集上的实验，在自动化与交互式场景下评估了我们的方法。
引用
@article{arxiv.2012.15343,
title = {Active Annotation of Informative Overlapping Frames in Video Mosaicking Applications},
author = {Loic Peter and Marcel Tella-Amo and Dzhoshkun Ismail Shakir and Jan Deprest and Sebastien Ourselin and Juan Eugenio Iglesias and Tom Vercauteren},
journal= {arXiv preprint arXiv:2012.15343},
year = {2021}
}