情感线索自适应标字：支持 DHH 及神经发展障碍学习者在 STEM 领域的学习
人机交互
2026-03-24 v2
摘要
实时标字对听力受损者（DHH）和神经发展障碍学习者（如注意力缺陷多动障碍患者）至关重要，但通常会遗漏情感和非语言线索，这些线索对理解至为重要。在 STEM 教育中，认知负荷较大的材料会加剧标字使用者在不同能力轮廓下的挑战。本文提出了一种以设计为导向的探索，介绍四种嵌入情感和多模态线索的标字原型，包括面部表情、身体姿态、关键词突出显示和表情符号。我们对这四种原型进行了 pilots 研究和主研究，共计 24 名参与者。结果显示，某些原型显著降低了自我报告的认知负荷，并提升了理解得分。定性反馈表明，可自定义的标字功能对于满足神经发展障碍用户的偏好（如 ADHD 或对表情符号不同程度的舒适度）至关重要。我们的发现为无障碍技术领域的持续讨论提供了依据，探讨如何以既可用又有效的方式将情感线索整合到标字中，以服务更广泛的学习者群体。
引用
@article{arxiv.2603.15977,
title = {Adaptive Captioning with Emotional Cues: Supporting DHH and Neurodivergent Learners in STEM},
author = {Sunday David Ubur and Eugenia Ha Rim Rho and Denis Gracanin},
journal= {arXiv preprint arXiv:2603.15977},
year = {2026}
}
备注
Accepted and presented at Affective Computing and Intelligent Interaction (ACII) Conference 2025; final version to appear in IEEE Xplore