中文

对比思维链提示

计算与语言 2023-11-17 v1

摘要

尽管思维链(chain of thought)在增强语言模型推理方面取得成功,其底层过程仍较少被理解。尽管逻辑上合理的推理看似对思维链至关重要,先前研究却惊人地揭示使用无效示范影响甚微。此外,常规思维链并未告知语言模型应避免哪些错误,这可能引发更多错误。因此,受人类可从正例与负例中学习的启发,我们提出对比思维链(contrastive chain of thought)以增强语言模型推理。与常规思维链相比,我们的方法同时提供有效与无效推理示范,引导模型逐步推理并减少推理错误。为提升泛化性,我们引入一种自动构建对比示范的方法。我们在推理基准上的实验表明,对比思维链可作为思维链提示的一种通用增强。

关键词

引用

@article{arxiv.2311.09277,
  title  = {Contrastive Chain-of-Thought Prompting},
  author = {Yew Ken Chia and Guizhen Chen and Luu Anh Tuan and Soujanya Poria and Lidong Bing},
  journal= {arXiv preprint arXiv:2311.09277},
  year   = {2023}
}