鸡为何过马路？对 VQA 中歧义问题的改写与分析
计算与语言
2023-06-05 v2
摘要
自然语言具有歧义性。解决歧义问题是成功回答问题的关键。聚焦于关于图像的问题，我们构建了一个歧义示例数据集。我们对这些示例进行标注，按其所针对的底层问题对答案分组，并为每组改写问题以降低歧义。我们的分析揭示了一个与语言对齐的视觉问题歧义成因本体。随后我们开发了一个英文问题生成模型，并通过自动与人工评估证明该模型能生成歧义更少的问题。我们进一步表明，所使用的问题生成目标使模型能够在无任何直接监督的情况下整合答案分组信息。
引用
@article{arxiv.2211.07516,
title = {Why Did the Chicken Cross the Road? Rephrasing and Analyzing Ambiguous Questions in VQA},
author = {Elias Stengel-Eskin and Jimena Guallar-Blasco and Yi Zhou and Benjamin Van Durme},
journal= {arXiv preprint arXiv:2211.07516},
year = {2023}
}
备注
ACL 2023. Code and data: https://github.com/esteng/ambiguous_vqa