审计搜索引擎在不同人口统计群体间的满意度差异

许多在线服务，如搜索引擎、社交媒体平台和数字市场，都宣称对所有用户开放，无论其年龄、性别或其他人口统计因素如何。然而，人们越来越担心这些服务可能会系统性地对某些用户群体服务不足。本文以搜索引擎为案例研究，提出了一个用于内部审计此类服务在不同人口统计群体间用户满意度差异的框架。我们首先解释了简单比较常用于评估搜索引擎的行为指标所存在的陷阱。然后，我们提出了三种方法，用于从观察到的评估指标差异中衡量潜在的用户满意度差异。为了开发这些方法，我们借鉴了因果推断文献和多层次建模文献中的思想。我们的框架广泛适用于其他在线服务，并为解释其评估指标提供了通用见解。