LLM-Glasses：面向视力受损者导航的生成式AI驱动眼镜
人机交互
2026-01-21 v2 机器人学
摘要
LLM-Glasses 是一个为视力受损者提供导航支持的可穿戴系统，利用YOLO-World目标检测、GPT-4o驱动的推理及触觉反馈实现实时引导。该设备将视觉场景理解转化为在太阳穴部位的直观触觉反馈，实现无需双手的导航。对系统进行了三项研究评估：13种触觉图案的识别率平均为81.3%，基于VICON的引导使用触觉线索的预定义路径，以及LLM引导的场景评估在无障碍情境下达91.8%的决策准确率、有静态障碍情境下达84.6%、动态障碍情境下达81.5%。这些结果表明LLM-Glasses在受控环境中能够提供可靠的导航支持，激励进一步开发提升响应性并在更复杂的真实场景中部署。
关键词
引用
@article{arxiv.2503.16475,
title = {LLM-Glasses: GenAI-driven Glasses with Haptic Feedback for Navigation of Visually Impaired People},
author = {Issatay Tokmurziyev and Miguel Altamirano Cabrera and Muhammad Haris Khan and Yara Mahmoud and Dzmitry Tsetserukou},
journal= {arXiv preprint arXiv:2503.16475},
year = {2026}
}