“展示而非仅言说”：指令多模态性的互补效应及其对软件指导的启示
人机交互
2026-03-04 v1
摘要
为软件学习设计自适应辅导系统面临着确定合适教学模态性的挑战。为此 informing 系统设计，我们对十对经验丰富的设计软件用户教导新手的两名学生进行观察研究（N=10），其中教师通过三种通信渠道（语音、视觉注释和远程屏幕控制）教授两种新的图形设计软件功能的多步骤程序。我们发现，注释通过空间精度补充语音，远程控制通过空间和时间精度补充语音，但两者都可能干扰学习者的自主性。教师会自适应地选择模态性，以平衡教学进度与学生认知参与度及其数字领土所有权感。我们的结果进一步支持了相邻性原则，强调了自主性在学习中的价值，同时提出了精确性-自主性权衡和数字领土性作为自适应软件指导的新设计约束。
引用
@article{arxiv.2603.02567,
title = {'Show It, Don't Just Say It': The Complementary Effects of Instruction Multimodality for Software Guidance},
author = {Emran Poh and Yueyue Hou and Tianyi Zhang and Jiannan Li},
journal= {arXiv preprint arXiv:2603.02567},
year = {2026}
}
备注
Proceedings of the 2026 ACM Conference on Human Factors in Computing Systems (CHI '26)