DALL-E 2 无法可靠捕捉常见句法过程
计算与语言
2022-10-26 v2 计算机视觉与模式识别
摘要
机器智能正日益与关于感知、语言处理以及理解并将自然语言转化为一系列刺激的能力的断言相联系。我们系统性地分析 DALL-E 2 捕捉语言学中广泛讨论且在人类语言中普遍存在的 8 种关涉组合性的语法现象的能力：约束原则与指代、被动、词序、并列、比较级、否定、省略和结构歧义。尽管幼童通常能掌握这些现象，学习句法与语义之间的系统性映射，DALL-E 2 却无法可靠推断出与句法一致的意义。这些结果对近期关于此类系统理解人类语言能力的断言提出了挑战。我们公开了完整的测试材料集作为未来测试的基准。
引用
@article{arxiv.2210.12889,
title = {DALL-E 2 Fails to Reliably Capture Common Syntactic Processes},
author = {Evelina Leivada and Elliot Murphy and Gary Marcus},
journal= {arXiv preprint arXiv:2210.12889},
year = {2022}
}