从运动形状中的人类社交互动语义表征
计算机视觉与模式识别
2025-09-26 v1 计算工程、金融与科学
计算与语言
摘要
人类是社会性生物，能够从运动形状的简单展示中轻松识别各种社交互动。虽然先前研究常聚焦于视觉特征，我们考察了人类用于补充视觉特征的语义表征。在研究1中，我们直接要求人类参与者根据对运动形状的印象为动画标注。我们发现人类反应呈分布状态。在研究2中，我们通过人类相似性判断测量了27种社交互动的表征几何，并将其与基于视觉特征、标签和动画描述语义嵌入的模型预测进行比较。我们发现语义模型在解释人类判断时为视觉特征提供了互补信息。在语义模型中，从描述中提取的基于动词的嵌入最能解释人类的相似性判断。这些结果表明，简单展示中的社会知觉反映了社交互动的语义结构，桥接了视觉与抽象表征。
引用
@article{arxiv.2509.20673,
title = {Human Semantic Representations of Social Interactions from Moving Shapes},
author = {Yiling Yun and Hongjing Lu},
journal= {arXiv preprint arXiv:2509.20673},
year = {2025}
}