RiddleSense：面向语言创造力与常识知识谜语式问题的推理
计算与语言
2021-07-06 v2 人工智能
摘要
问题：我有五根手指但我不是活的。我是什么？答案：一只手套。回答此类谜语式问题是一个具有挑战性的认知过程，因为它需要复杂的常识推理能力、对比喻性语言的理解以及反事实推理技能，而这些均为高级自然语言理解（NLU）的重要能力。然而，目前尚无专门的数据集旨在测试这些能力。为此，我们提出 RiddleSense，一项新的多选问答任务，并附带首个用于回答谜语式常识问题的大规模数据集（5.7k 示例）。我们系统地评估了多种模型在该挑战上的表现，并指出最佳有监督模型与人类表现之间存在较大差距——这暗示了未来在面向构建高级 NLU 系统的高阶常识推理与语言创造力方向上的有趣研究。
引用
@article{arxiv.2101.00376,
title = {RiddleSense: Reasoning about Riddle Questions Featuring Linguistic Creativity and Commonsense Knowledge},
author = {Bill Yuchen Lin and Ziyi Wu and Yichi Yang and Dong-Ho Lee and Xiang Ren},
journal= {arXiv preprint arXiv:2101.00376},
year = {2021}
}
备注
Accepted to ACL 2021 (Findings). Project page: https://inklab.usc.edu/RiddleSense