中文

GradientCoin:一种点对点去中心化大语言模型

机器学习 2023-08-22 v1 计算与语言 机器学习

摘要

自 2008 年比特币电子现金系统提出以来,比特币在过去十年从根本上改变了经济体系。自 2022 年起,GPT 等大语言模型(LLMs)已在诸多现实任务中超越人类。然而,这些大语言模型存在若干实际问题。例如,模型为中心化并由特定单位控制,其弱点之一是若该单位决定关停模型,则模型不再可用;第二弱点是该模型背后缺乏可保证的差异性,因为某些不诚实单位可能设计自有模型并喂入不健康训练数据。本文提出一种类似比特币现金系统运行的点对点去中心化 LLM 的纯理论设计。但此类系统的实现可能遭遇各种实际困难,且新系统在经济上不大可能优于标准比特币系统,因此设计动机有限。可能仅有两类人有兴趣为其建立实用系统:\bullet 偏好使用去中心化类 ChatGPT 软件者。\bullet 相信碳基生命目的在于创造硅基生命者,如《变形金刚》中的 Optimus Prime。第二类人感兴趣的原因或许是:此类 AI 系统有可能某日觉醒并成为地球上更高层级的智能。

关键词

引用

@article{arxiv.2308.10502,
  title  = {GradientCoin: A Peer-to-Peer Decentralized Large Language Models},
  author = {Yeqi Gao and Zhao Song and Junze Yin},
  journal= {arXiv preprint arXiv:2308.10502},
  year   = {2023}
}