你能信任趋势吗：发现社会数据中的辛普森悖论
计算机与社会
2018-01-16 v1
摘要
我们研究辛普森悖论如何影响对社会数据趋势的分析。根据该悖论，在整个群体上聚合的数据中观察到的趋势可能不同于、甚至相反于底层子组的趋势。未考虑此效应会导致分析得出错误结论。我们提出一种统计方法，通过比较聚合数据中的统计趋势与拆分子组中的统计趋势，自动识别数据中的辛普森悖论。我们将该方法应用于来自热门问答平台 Stack Exchange 的数据，分析影响回答者表现的因素，具体而言，即用户撰写的答案被提问者接受为最佳答案的可能性。我们的分析证实了一个已知的辛普森悖论并识别出若干新实例。这些悖论为 Stack Exchange 上的用户行为提供了新颖的见解。
引用
@article{arxiv.1801.04385,
title = {Can you Trust the Trend: Discovering Simpson's Paradoxes in Social Data},
author = {Nazanin Alipourfard and Peter G. Fennell and Kristina Lerman},
journal= {arXiv preprint arXiv:1801.04385},
year = {2018}
}
备注
to appear in the Proceedings of WSDM-2018