OpenLifelogQA:一个开放式多模态生命日志问答数据集
多媒体
2026-04-30 v2 信息检索
摘要
我们介绍 OpenLifelogQA,这是一个来自 18 个月多模态生命日志数据的大规模开放式生命日志问答数据集。生命日志记录是通过可穿戴设备对个人日常活动进行被动收集和分析的过程,产生包括图像、位置和生物指标在内的丰富多模态数据。对生命日志数据进行问答能让用户交互式地查询自身经历,支持记忆支持、生活方式分析和个人助理等应用。OpenLifelogQA 包含 14,187 对 Q&A,涵盖多种问题类型和难度水平,旨在支持现实场景下的稳健评估。与先前资源相比,OpenLifelogQA 在实际应用方面具有更大的多样性和实用性。为建立基线,我们评估了 LLaVA-NeXT-Interleave 7B 模型,取得 89.7% 的 BERTScore、25.87% 的 ROUGE-L 以及 3.97 的平均 LLM Score。通过发布 OpenLifelogQA,我们旨在推动生命日志技术的未来研究,为具备记忆增强、健康支持和生活方式辅导能力的个人生命日志助理铺路。
引用
@article{arxiv.2508.03583,
title = {OpenLifelogQA: An Open-Ended Multi-Modal Lifelog Question-Answering Dataset},
author = {Quang-Linh Tran and Hoang-Bao Le and Tuong-Nghiem Diep and Binh Nguyen and Gareth J. F. Jones and Cathal Gurrin},
journal= {arXiv preprint arXiv:2508.03583},
year = {2026}
}
备注
In the proceedings of the 14th International Symposium on Information and Communication Technology