大语言模型在手势选择文本分析中的应用
人机交互
2023-10-24 v1 人工智能
摘要
手势具有多种交际功能，强力影响人类面对面互动。这种交际功能如何实现在个体间差异巨大，并取决于说话者角色与互动情境。自动手势生成方法不仅在依赖数据驱动技术的程度上不同，也在能否生成情境与说话者特定手势的程度上各异。然而，这些方法面临两大挑战：其一是获取适用于应用情境与目标的大量训练数据；其二是与实现应用特定意图的设计者控制相关。在此，我们通过使用大语言模型（LLMs）应对这些挑战，表明这些海量数据的有力模型可被调适用于手势分析与生成。具体而言，我们使用 ChatGPT 作为工具，基于极简提示建议可实现设计者意图的情境特定手势。我们还发现 ChatGPT 能建议出极简训练数据中未出现的新颖且恰当的手势。LLMs 的使用是颇具前景的手势生成途径，可减少繁琐标注需求，并有望灵活快速地适配不同设计者意图。
引用
@article{arxiv.2310.13705,
title = {Large language models in textual analysis for gesture selection},
author = {Laura B. Hensel and Nutchanon Yongsatianchot and Parisa Torshizi and Elena Minucci and Stacy Marsella},
journal= {arXiv preprint arXiv:2310.13705},
year = {2023}
}