NaturalReasoning：构建包含280万个具有挑战性问题的自然推理基准
计算与语言
2025-11-10 v4
摘要
将推理能力扩展到传统领域之外（如数学和编程）受到了多样性和高质量问题缺乏的限制。为克服这一限制，我们提出了一种可扩展的生成方法，用于创建具有多样性和挑战性的推理问题，伴随参考答案。我们 presented NaturalReasoning，这是一个包含280万个问题的综合数据集，涵盖多个领域，包括STEM领域（如物理学、计算机科学）、经济学、社会科学等。我们通过知识蒸馏实验表明，NaturalReasoning能够有效地激发和传递推理能力。此外，我们展示了NaturalReasoning也适用于基于外部奖励模型或自奖励的无监督自训练。为促进未来的工作，我们在https://huggingface.co/datasets/facebook/natural_reasoning 上公开发布NaturalReasoning。
引用
@article{arxiv.2502.13124,
title = {NaturalReasoning: Reasoning in the Wild with 2.8M Challenging Questions},
author = {Weizhe Yuan and Jane Yu and Song Jiang and Karthik Padthe and Yang Li and Ilia Kulikov and Kyunghyun Cho and Dong Wang and Yuandong Tian and Jason E Weston and Xian Li},
journal= {arXiv preprint arXiv:2502.13124},
year = {2025}
}
备注
Dataset at https://huggingface.co/datasets/facebook/natural_reasoning