偏好模型假设效用函数的比例比例风险
机器学习
2025-08-20 v1 人工智能
机器学习
摘要
从人工标注数据估计偏好的方法通常涉及对排序选择列表引入分布，例如 Plackett-Luce 模型。事实上，现代人工智能对齐工具，如奖励建模和直接偏好优化，都基于 Plackett-Luce 模型所提出的统计假设。本文将将 Plackett-Luce 模型与另一经典且广为人知的统计模型——Cox 比例风险模型联系起来，并尝试阐明其中所蕴含的含义。
引用
@article{arxiv.2508.13189,
title = {Preference Models assume Proportional Hazards of Utilities},
author = {Chirag Nagpal},
journal= {arXiv preprint arXiv:2508.13189},
year = {2025}
}