AR Secretary Agent：基于 LLM 的增强现实眼镜实时记忆增强
人机交互
2025-05-20 v1
摘要
许多专业人士每日需与大量人员互动，这往往导致难以记起具体细节：这人是谁？上次我们聊了什么？增强现实（AR）眼镜凭借视觉与听觉数据采集能力，为解决这一问题提供了可能。本文实现了基于高级大语言模型（LLM）和计算机视觉技术的 AR Secretary Agent 系统。该系统可为佩戴者提供隐私信息，识别对话对象并总结历史对话内容。为验证 AR Secretary 的有效性，我们对13名参与者进行了用户研究，结果表明该技术可使用户记忆能力提升最高达20%。
引用
@article{arxiv.2505.11888,
title = {AR Secretary Agent: Real-time Memory Augmentation via LLM-powered Augmented Reality Glasses},
author = {Raphaël A. El Haddad and Zeyu Wang and Yeonsu Shin and Ranyi Liu and Yuntao Wang and Chun Yu},
journal= {arXiv preprint arXiv:2505.11888},
year = {2025}
}