DrawTalking:通过草图绘制与语音讲述构建交互式世界
人机交互
2024-08-07 v4 人工智能
计算与语言
新兴技术
图形学
摘要
我们引入了DrawTalking,这是一种在讲述故事时通过草图绘制和语音来构建和控制交互式世界的方法。它强调用户的控制权和灵活性,并提供类似编程的能力而无需编写代码。一项使用我们原型进行的早期开放式研究表明,其机制能引起共鸣,并适用于许多创意探索用例,具有启发和指导未来用于创意探索和创作的自然界面研究的潜力。
引用
@article{arxiv.2401.05631,
title = {DrawTalking: Building Interactive Worlds by Sketching and Speaking},
author = {Karl Toby Rosenberg and Rubaiat Habib Kazi and Li-Yi Wei and Haijun Xia and Ken Perlin},
journal= {arXiv preprint arXiv:2401.05631},
year = {2024}
}
备注
25 pages, 27 figures; Matching version accepted at UIST 2024