面向盲人或视力受损者的基于瓷砖的图像编辑器——AltCanvas
人机交互
2025-04-30 v1 人工智能
计算机视觉与模式识别
摘要
视力受损者常常在创建依赖视觉元素、尤其是在传递空间和结构信息时感到困难。现有的无障碍绘图工具是逐行构建图像，适用于数学等简单任务，但不适用于更具表达性的艺术作品。另一方面，新兴的基于生成式AI的文本到图像工具可以从自然语言描述中生成富有表现力的插图，但缺乏对图像构图和属性的精确控制。为此，我们的工作将生成式AI与一种建构性方法相结合，提供用户更好的控制和编辑功能。我们的系统AltCanvas具有基于瓷砖的界面，使用户能够逐步构建视觉场景，其中每个瓷砖代表场景中的一个对象。用户可以添加、编辑、移动和排列对象，同时接收语音和音频反馈。完成后，场景可以渲染为彩色插图或用于制作实体图的矢量图。我们邀请14名盲人或低视力用户参与设计和评估，我们发现参与者有效地使用了AltCanvas工作流程来创建插图。
引用
@article{arxiv.2408.10240,
title = {AltCanvas: A Tile-Based Image Editor with Generative AI for Blind or Visually Impaired People},
author = {Seonghee Lee and Maho Kohga and Steve Landau and Sile O'Modhrain and Hari Subramonyam},
journal= {arXiv preprint arXiv:2408.10240},
year = {2025}
}