2025年基础模型透明度指数
人工智能
2025-12-12 v1 计算机与社会
机器学习
摘要
基础模型开发商是世界上最重要的公司之一。随着这些公司变得越来越重要,它们的透明度实践如何演变?2025年基础模型透明度指数是年度努力的第三个版本,用于 characterize and quantify 基础模型开发商的透明度。2025年FMTI引入了与数据获取、使用数据以及监控和评估相关的新指标,并首次评估了阿里巴巴、DeepSeek和xAI等公司。2024年FMTI报告称透明度正在改善,但2025年FMTI发现这一进展恶化了:平均分为2024年的58分下降到2025年的40分。公司最不透明的是其训练数据和训练计算资源,以及旗舰模型的部署后使用和影响。在这种总体趋势下,IBM作为正面离群值得分95分,与最低分的xAI和Midjourney仅为14分。我们对得分居中的Frontier Model Forum成员持观察态度:我们认为这些公司可能是为了避免低分带来的声誉损失,但缺乏成为透明度领导者的动机。随着全球政策制定者越来越多地要求某些类型的透明度,本工作揭示了基础模型开发商当前的透明度状况,以及在新颁布的政策下可能的变化,以及在何处需要更激进的政策干预以解决关键信息缺口。
引用
@article{arxiv.2512.10169,
title = {The 2025 Foundation Model Transparency Index},
author = {Alexander Wan and Kevin Klyman and Sayash Kapoor and Nestor Maslej and Shayne Longpre and Betty Xiong and Percy Liang and Rishi Bommasani},
journal= {arXiv preprint arXiv:2512.10169},
year = {2025}
}
备注
Website: https://crfm.stanford.edu/fmti/December-2025/index.html