基于文化学习的语言模型文化适应
计算与语言
2025-04-07 v1
摘要
适配大型语言模型(LLMs)以适应多样化的文化价值是一项具有挑战性的任务,因为现有的LLMs往往默认反映特定群体的价值观,并可能对其他群体造成伤害。本文提出了CLCA框架,通过文化学习机制增强LLMs与文化价值的对齐。该框架利用模拟的社交互动生成包含角色扮演的对话,构建于文化适应社交情境中,捕获隐式的文化规范用于模型微调。CLCA在多种模型架构上均显著提升了基于世界价值调查数据测量的文化价值对齐效果,展示了我们方法的有效性。我们的结果为理解意图和社交互动如何增强LLMs的文化价值适应提供了初步证据,凸显了基于文化学习的训练方法的前景。
引用
@article{arxiv.2504.02953,
title = {Cultural Learning-Based Culture Adaptation of Language Models},
author = {Chen Cecilia Liu and Anna Korhonen and Iryna Gurevych},
journal= {arXiv preprint arXiv:2504.02953},
year = {2025}
}