ECHO：用于评估聊天、人类行为和结果的开源研究平台
人机交互
2026-02-12 v1 人工智能
信息检索
摘要
ECHO（聊天、人类行为和结果评估）是一个开源研究平台，旨在支持对人类与对话式 AI 系统和 Web 搜索引擎交互的可重复、混合方法研究。它使来自不同学科的研究人员能够编排端到端的实验工作流程，在统一的、低编码负担的框架内整合同意和背景调查、基于聊天和搜索的信息寻求会话、写作或判断任务以及任务前后评估。ECHO 记录细粒度的交互轨迹和参与者响应，并导出结构化数据集以供下游分析。通过同时支持聊天和搜索以及灵活的评价工具，ECHO 降低了研究不同信息访问范式中的学习、决策和用户体验的技术障碍，使信息检索、人机交互和社会科学领域的研究人员能够进行可扩展和可重复的以人为中心的 AI 评估。
引用
@article{arxiv.2602.10295,
title = {ECHO: An Open Research Platform for Evaluation of Chat, Human Behavior, and Outcomes},
author = {Jiqun Liu and Nischal Dinesh and Ran Yu},
journal= {arXiv preprint arXiv:2602.10295},
year = {2026}
}