AdaGlimpse：具有任意瞥视位置与尺度的主动视觉探索
计算机视觉与模式识别
2024-10-30 v2
摘要
主动视觉探索（AVE）是一项涉及动态选择观测（瞥视）的任务，这对于促进对环境的理解和导航至关重要。尽管现代 AVE 方法展现出了令人印象深刻的性能，但它们受限于来自刚性网格的固定尺度瞥视。相比之下，配备光学变焦功能的现有移动平台可以捕获任意位置和尺度的瞥视。为了弥补软件与硬件能力之间的差距，我们引入了 AdaGlimpse。它使用 Soft Actor-Critic（一种为探索任务量身定制的强化学习算法）来选择任意位置和尺度的瞥视。这种方法使我们的模型能够在放大进行详细分析之前，快速建立对环境的一般认知。实验结果表明，AdaGlimpse 在各种视觉任务中超越了以往方法，同时在现实的 AVE 场景中保持了更高的适用性。
引用
@article{arxiv.2404.03482,
title = {AdaGlimpse: Active Visual Exploration with Arbitrary Glimpse Position and Scale},
author = {Adam Pardyl and Michał Wronka and Maciej Wołczyk and Kamil Adamczewski and Tomasz Trzciński and Bartosz Zieliński},
journal= {arXiv preprint arXiv:2404.03482},
year = {2024}
}
备注
ECCV 2024