中文

ParlAI Vote:分析大型语言模型中性别与政治偏见的 Web 平台

计算与语言 2025-12-03 v3 人工智能 人机交互 机器学习

摘要

我们提出 ParlAI Vote,一个交互式网页平台,用于探索欧洲议会辩论和投票,并对大型语言模型 (LLM) 的投票预测和偏见分析进行测试。该 Web 系统将辩论主题、演讲与选举结果连接起来,并包括丰富的人口统计学数据,如性别、年龄、国家和政治派系。用户可浏览辩论、检查关联演讲、比较真实投票结果与来自前沿 LLM 的预测,并查看按人口统计学分组划分的错误分析。通过可视化 EuroParlVote 基准及其性别分类和投票预测核心任务,ParlAI Vote 凸显了当前主流 LLM 在系统性性能偏见方面的问题。该平台将数据、模型和可视化分析集成于单一界面,降低了复现发现、审计行为和运行反事实情景的门槛。该 Web 平台还显示模型的推理过程,帮助用户了解错误发生的原因以及模型依赖的线索。它支持研究、教育和公众参与立法决策,同时明确阐明了当前 LLM 在政治分析中的优势与局限性。

关键词

引用

@article{arxiv.2509.16264,
  title  = {ParlAI Vote: A Web Platform for Analyzing Gender and Political Bias in Large Language Models},
  author = {Wenjie Lin and Hange Liu and Yingying Zhuang and Xutao Mao and Jingwei Shi and Xudong Han and Tianyu Shi and Jinrui Yang},
  journal= {arXiv preprint arXiv:2509.16264},
  year   = {2025}
}

备注

online demo: https://euro-parl-vote-demo.vercel.app/; Video: https://www.youtube.com/@Jinrui-sf2jg