共同基础下多模态指称策略的形式分析
计算与语言
2020-03-18 v1 人工智能
摘要
在本文中，我们呈现了对计算生成的混合模态限定指称表达式的分析，这些表达式使用手势与语言描述的组合。在此过程中，我们揭示了手势与语言之间交互的一些显著形式语义性质，这些性质以内容被引入(计算)说话者与(人类)观看者之间共同基础为条件，并展示了这些形式特征如何有助于训练更好的模型以预测观看者对于指称表达式的判断，并潜在地有助于生成更自然且更具信息性的指称表达式。
引用
@article{arxiv.2003.07385,
title = {A Formal Analysis of Multimodal Referring Strategies Under Common Ground},
author = {Nikhil Krishnaswamy and James Pustejovsky},
journal= {arXiv preprint arXiv:2003.07385},
year = {2020}
}
备注
9 pages (incl refs), 7 figures, 3 tables, proceedings of LREC 2020 (postponed due to COVID-19)