零躯体问题:探究 LLM 对感官语言的运用
计算与语言
2025-04-10 v1 机器学习
摘要
感官语言表达从味道、声音到兴奋和胃痛等身体经验。这种语言对来自机器人、叙事学、语言学和认知科学等多个领域的学者具有广泛的研究兴趣。本文探讨了语言模型——它们本身并非具身化——能否近似拟人类对具身语言的运用。我们扩展了一个包含平行人类与模型回应的旁白语料库,新增 18,000 篇由 18 个流行模型生成的故事。我们发现,所有模型生成的故事与人类使用感官语言的差异显著,但这些差异在不同模型家族之间差异较大。具体而言,Gemini 模型在大多数维度上使用的感官语言显著多于人类,而其他五个模型家族中大多数模型使用的感官语言显著少于人类。对五个模型运行的线性探针表明,它们能够识别感官语言。然而,我们发现指令调优可能抑制感官语言的使用。这一研究旨在支持后续工作,故我们公开了扩展后的故事数据集。
引用
@article{arxiv.2504.06393,
title = {The Zero Body Problem: Probing LLM Use of Sensory Language},
author = {Rebecca M. M. Hicke and Sil Hamilton and David Mimno},
journal= {arXiv preprint arXiv:2504.06393},
year = {2025}
}