基于草图的早期设计概念中人类-MLLM 交互的分类学
人机交互
2026-03-03 v3
摘要
随着多模态大语言模型(MLLM)日益集成到早期设计工具中，理解设计师在构思过程中如何与 AI 协作变得重要。在对 12 名参与者进行的用户研究中，我们使用自动记录的交互日志和事后访谈分析了 MLLM 驱动系统的草图设计交互。基于人类与 AI 之间创造责任的分配方式，我们预定义了四种交互模式：Human-Only、Human-Lead、AI-Lead 和 Co-Evolution，并分析了这些模式在草图设计构思中的具体表现。我们的结果表明，设计师很少依赖单一模式；相反，人类主导和 AI 主导的角色在构思实例之间频繁交织并发生变化。这些发现为未来研究提供了实证依据，以探讨设计师为何与 AI 切换角色，以及交互系统如何更好地支持这种动态协作。
关键词
引用
@article{arxiv.2602.22171,
title = {A Taxonomy of Human--MLLM Interaction in Early-Stage Sketch-Based Design Ideation},
author = {Weiyan Shi and Kenny Tsu Wei Choo},
journal= {arXiv preprint arXiv:2602.22171},
year = {2026}
}
备注
Accepted at CHI 2026 Posters