Climate Finance Bench
计算与语言
2025-05-30 v1
摘要
Climate Finance Bench 引入了一个开放基准，旨在使用大型语言模型 (LLM) 对企业气候披露进行问答。我们精心挑选了 33 份涵盖所有 11 个 GICS 行业的英文近期可持续发展报告，并标注了 330 对经专家验证的问答对，涵盖纯抽取、数值推理和逻辑推理。基于此数据集，我们提出了对 RAG（检索增强生成）方法的比较。我们表明，检索器定位实际包含答案的段落的能力是主要的性能瓶颈。我们进一步主张在 AI 气候应用中进行透明的碳排放报告，并强调了权重量化等技术的优势。
引用
@article{arxiv.2505.22752,
title = {Climate Finance Bench},
author = {Rafik Mankour and Yassine Chafai and Hamada Saleh and Ghassen Ben Hassine and Thibaud Barreau and Peter Tankov},
journal= {arXiv preprint arXiv:2505.22752},
year = {2025}
}
备注
Dataset is available at https://github.com/Pladifes/climate_finance_bench