QoNext：迈向基础模型的下一代体验质量
计算与语言
2025-10-10 v2
摘要
现有对基础模型的评估（包括近期以人为中心的方法）未能捕捉真正重要的东西：交互过程中的用户体验。当前方法仅将评估视为输出正确性的问题，忽略了用户满意度源于响应质量与交互之间的相互作用，这限制了它们解释用户体验潜在机制的能力。为了弥补这一空白，我们提出了 QoNext，这是首个将网络与多媒体领域的体验质量（QoE）原则应用于基础模型评估的框架。QoNext 识别了塑造用户体验的体验因素，并将其纳入受控实验，在不同配置下收集人类评分。基于这些研究，我们构建了一个面向 QoE 的数据库，并训练了预测模型，以从可测量的系统参数中估计感知到的用户体验。我们的结果表明，QoNext 不仅能够实现主动且细粒度的评估，还能为实践中优化基础模型的产品化服务提供可操作的指导。
引用
@article{arxiv.2509.21889,
title = {QoNext: Towards Next-generation QoE for Foundation Models},
author = {Yijin Guo and Zicheng Zhang and Ye Shen and Farong Wen and Junying Wang and Qi Jia and Guangtao Zhai},
journal= {arXiv preprint arXiv:2509.21889},
year = {2025}
}