性能对用户价值几何？一种量化方法
人机交互
2022-05-02 v1 硬件体系结构
密码学与安全
性能
摘要
架构师与系统设计师在设计过程中巧妙地平衡多个相互竞争的设计约束，却无法在系统指标与终端用户体验之间进行转换。本工作提出三种方法来填补这一空白。第一种是激励相容的方法，确定以美元表示的用户速度价值的“基准真相”度量，并发现用户愿意接受其个人计算机 10%、20% 和 30% 的性能损失，以换取每天 2.27 美元、4.07 美元和 4.43 美元。然而，尽管高度准确，该方法过程繁琐，且无法在大量参与者中扩展。为实现可扩展性，我们引入第二种方法——基于实验室的模拟实验——发现用户愿意接受其个人计算机 10%、20% 和 30% 的永久性性能损失，以换取 127 美元、169 美元和 823 美元。最后，为实现更大可扩展性，我们引入第三种方法——调查——并观察到缺乏激励相容性以及缺乏对被节流设备性能的实际体验显著扭曲了结果，从而证明了基于实验室或激励相容的研究设计的必要性。通过量化用户满意度与性能之间的权衡，我们使架构师与系统设计师能够在设计要求之间做出更细致的权衡。
引用
@article{arxiv.2204.13698,
title = {How Much is Performance Worth to Users? A Quantitative Approach},
author = {Adam Hastings and Lydia B. Chilton and Simha Sethumadhavan},
journal= {arXiv preprint arXiv:2204.13698},
year = {2022}
}