探索大语言模型中的准确率与公平性权衡
计算与语言
2024-11-25 v1 人工智能
计算机与社会
机器学习
摘要
大型语言模型(LLM)在人工智能领域取得了显著进展,展现了与人类交互并影响人类认知的能力。然而,近期研究揭示了LLM中内在偏见的实例,这是一个亟需关注的关键问题。在我们的研究中,我们深入探讨了在LLM增强过程中平衡准确率与公平性这一复杂挑战。虽然提高准确率确实可以提升整体LLM性能,但往往以牺牲公平性为代价。过度强调优化一个指标会导致另一个指标显著下降。这凸显了在LLM设计和优化阶段需要考虑多个因素的必要性。因此,我们提倡将LLM训练过程重新定义为多目标学习任务。我们的研究表明,多目标进化学习(MOEL)方法为解决这一挑战提供了有前景的途径。我们的MOEL框架能够同时优化准确率和公平性指标, resulting in a Pareto-optimal set of LLMs. 总之,我们的研究为LLM中准确率与公平性之间精妙平衡提供了有价值的见解,这对其实际应用至关重要。通过运用MOEL,我们为实现更公平且更高效的AI技术提供了一条有前景的道路。
引用
@article{arxiv.2411.14500,
title = {Exploring Accuracy-Fairness Trade-off in Large Language Models},
author = {Qingquan Zhang and Qiqi Duan and Bo Yuan and Yuhui Shi and Jialin Liu},
journal= {arXiv preprint arXiv:2411.14500},
year = {2024}
}
备注
9 pages