1万亿令牌(1TT)平台:一种面向大语言模型高效数据共享与补偿的新颖框架
计算与语言
2024-10-01 v1 人工智能
摘要
在本文中,我们提出了1万亿令牌平台(1TT平台),这是一种新颖框架,旨在通过透明且公平的利润分享机制促进高效的数据共享。该平台促进了数据贡献者(提供原本不公开的数据集)与数据消费者(利用这些数据集增强自身服务)之间的协作。数据贡献者以货币形式获得补偿,分享数据消费者服务所产生的部分收入。数据消费者承诺根据预定义的利润分享安排,将部分收入与贡献者分享。通过引入透明的利润分享范式来激励大规模数据共享,1TT平台创造了一个协作环境,以推动NLP和LLM技术的发展。
引用
@article{arxiv.2409.20149,
title = {1 Trillion Token (1TT) Platform: A Novel Framework for Efficient Data Sharing and Compensation in Large Language Models},
author = {Chanjun Park and Hyunsoo Ha and Jihoo Kim and Yungi Kim and Dahyun Kim and Sukyung Lee and Seonghoon Yang},
journal= {arXiv preprint arXiv:2409.20149},
year = {2024}
}