大语言模型能否成为好伴侣？基于 LLM 且具有对话共同基础的眼镜系统
人机交互
2023-12-01 v1
摘要
将聊天机器人开发为个人伴侣一直是人工智能研究者的目标。大语言模型（LLMs）近期的进展为赋予聊天机器人拟人化语言能力提供了实用方案。然而，要使聊天机器人充当伴侣，仅靠 LLMs 是不够的。人类利用其对个体性格的理解来推动对话。聊天机器人也需要这种能力以实现类人陪伴。它们应基于对其拥有者个性化、实时且随时间演化的知识来行动。我们将此类必备知识定义为聊天机器人与其拥有者之间的“共同基础”（common ground），并提议从名为 OS-1 的基于 LLM 的模块构建一个共同基础感知的对话系统，以实现聊天机器人陪伴。OS-1 由眼镜承载，可感知用户接收到的视觉与音频信号并提取实时上下文语义。这些语义被分类并记录，以形成历史上下文，从中提炼出用户画像并随时间演化，即 OS-1 逐步了解其用户。OS-1 结合来自实时语义、历史上下文与用户特定画像的知识，生成共同基础感知的提示输入至 LLM 模块。LLM 的输出被转换为音频，在适当时向佩戴者说出。我们开展了实验室与实地研究，以评估 OS-1 在聊天机器人与用户间建立共同基础的能力。系统的技术可行性与能力也得到了评估。具备共同基础感知的 OS-1 能显著提升用户满意度，并可能催生个人情感支持与协助等下游任务。
引用
@article{arxiv.2311.18251,
title = {Can Large Language Models Be Good Companions? An LLM-Based Eyewear System with Conversational Common Ground},
author = {Zhenyu Xu and Hailin Xu and Zhouyang Lu and Yingying Zhao and Rui Zhu and Yujiang Wang and Mingzhi Dong and Yuhu Chang and Qin Lv and Robert P. Dick and Fan Yang and Tun Lu and Ning Gu and Li Shang},
journal= {arXiv preprint arXiv:2311.18251},
year = {2023}
}
备注
36 pages, 25 figures, Under review at ACM IMWUT