赢得 CVPR'2022 AQTC 挑战赛：一种两阶段功能中心方法
计算机视觉与模式识别
2022-06-23 v2 多媒体
摘要
以功能为中心的问题驱动式任务完成（AQTC）是一项新颖的任务，旨在帮助 AI 助手从教学视频和脚本中学习，并逐步引导用户。本文通过一种两阶段功能中心方法来处理 AQTC，该方法由 Question2Function 模块（将问题与相关功能关联）和 Function2Answer 模块（基于历史步骤预测动作）组成。我们在每个模块中评估了多种可能的解决方案，并与给定的基线相比取得了显著的增益。我们的代码可在 \url{https://github.com/starsholic/LOVEU-CVPR22-AQTC} 获取。
引用
@article{arxiv.2206.09597,
title = {Winning the CVPR'2022 AQTC Challenge: A Two-stage Function-centric Approach},
author = {Shiwei Wu and Weidong He and Tong Xu and Hao Wang and Enhong Chen},
journal= {arXiv preprint arXiv:2206.09597},
year = {2022}
}