中文

探索大语言模型中的准确率与公平性权衡

计算与语言 2024-11-25 v1 人工智能 计算机与社会 机器学习

摘要

大型语言模型(LLM)在人工智能领域取得了显著进展,展现了与人类交互并影响人类认知的能力。然而,近期研究揭示了LLM中内在偏见的实例,这是一个亟需关注的关键问题。在我们的研究中,我们深入探讨了在LLM增强过程中平衡准确率与公平性这一复杂挑战。虽然提高准确率确实可以提升整体LLM性能,但往往以牺牲公平性为代价。过度强调优化一个指标会导致另一个指标显著下降。这凸显了在LLM设计和优化阶段需要考虑多个因素的必要性。因此,我们提倡将LLM训练过程重新定义为多目标学习任务。我们的研究表明,多目标进化学习(MOEL)方法为解决这一挑战提供了有前景的途径。我们的MOEL框架能够同时优化准确率和公平性指标, resulting in a Pareto-optimal set of LLMs. 总之,我们的研究为LLM中准确率与公平性之间精妙平衡提供了有价值的见解,这对其实际应用至关重要。通过运用MOEL,我们为实现更公平且更高效的AI技术提供了一条有前景的道路。

关键词

引用

@article{arxiv.2411.14500,
  title  = {Exploring Accuracy-Fairness Trade-off in Large Language Models},
  author = {Qingquan Zhang and Qiqi Duan and Bo Yuan and Yuhui Shi and Jialin Liu},
  journal= {arXiv preprint arXiv:2411.14500},
  year   = {2024}
}

备注

9 pages