ArtInsight:面向混合视力能力家庭的 AI 驱动艺术品 engagement 系统
人机交互
2025-03-11 v2
摘要
我们介绍了 ArtInsight,这是一个新型的人工智能驱动系统,用于促进混合视力能力家庭中儿童创作艺术品的深度互动。ArtInsight 利用大语言模型(LLM)为儿童的艺术品创作出尊重且详尽的初始描述,并提供:为生动概览生成创意 AI 描述、录制音频以捕获儿童对其艺术品的自我描述,以及为盲视或低视力(BLV)家庭成员与其子女之间提供的一套 AI 生成问题以促进讨论。除 ArtInsight 本身外,我们还贡献了一个用于评估 AI 生成的儿童创作艺术品描述的新评估标准,以及对当前主流 LLM 的评估。我们使用五组 BLV 家庭成员及其子女进行了对 ArtInsight 的评估,并以一个 BLV 儿童治疗师为案例进行了研究。我们的发现表明,参与者更倾向于使用 ArtInsight 提供的较长、针对性的艺术描述,而非现有 BLV AI 工具生成的描述。参与者认为,创意描述和音频录音组件最有益,其中前者帮助“将图画活化”,后者将儿童的叙述置于中心,生成情境感知的 AI 响应。我们的发现揭示了 AI 如何用于支持艺术互动的不同方式,包括与儿童艺术家互动前、中后,以及 BLV 成人及其视力正常的子女对 AI 驱动工具的期望。
引用
@article{arxiv.2502.19263,
title = {ArtInsight: Enabling AI-Powered Artwork Engagement for Mixed Visual-Ability Families},
author = {Arnavi Chheda-Kothary and Ritesh Kanchi and Chris Sanders and Kevin Xiao and Aditya Sengupta and Melanie Kneitmix and Jacob O. Wobbrock and Jon E. Froehlich},
journal= {arXiv preprint arXiv:2502.19263},
year = {2025}
}
备注
21 pages, 30th International Conference on Intelligent User Interfaces (IUI 2025)