CookAR:面向低视力人群的可穿戴AR厨房工具交互 affordance 增强
人机交互
2025-11-25 v2
摘要
烹饪是日常生活中的核心活动,支持独立生活以及心理和身体健康。然而, prior work(先前工作)已凸显了低视力(LV)人群烹饪的关键障碍,尤其是就安全与工具交互而言,如锋利的刀具或热锅。drawing on recent advancements in computer vision(计算机视觉)技术,我们提出CookAR,一款佩戴式AR系统,提供实时物体 affordance 增强,以支持厨房工具的安全高效交互。为设计和实现CookAR,我们收集并标注了首个厨房工具 affordance 的 egocentric 数据集,微调了 affordance 分割模型,并开发了带有立体摄像头的AR系统以生成视觉增强。为验证CookAR,我们对微调模型进行了技术评估,并邀请10名低视力参与者进行了定性实验室研究,以评估合适的增强设计。我们的技术评估表明,模型在我们的数据集上优于基线模型,而我们的使用者研究显示,参与者更倾向于选择 affordance 增强而非传统的整体物体增强。
关键词
引用
@article{arxiv.2407.13515,
title = {CookAR: Affordance Augmentations in Wearable AR to Support Kitchen Tool Interactions for People with Low Vision},
author = {Jaewook Lee and Andrew D. Tjahjadi and Jiho Kim and Junpu Yu and Minji Park and Jiawen Zhang and Jon E. Froehlich and Yapeng Tian and Yuhang Zhao},
journal= {arXiv preprint arXiv:2407.13515},
year = {2025}
}