mathematical reasoning oracle-free evaluation LLM judge
摘要

近期推理模型在生成研究级数学解答方面取得进展,但验证仍依赖稀缺专家资源。本文提出“基于效用的评估”方法,无需标准答案,通过将候选解作为上下文示例应用于相关可验证问题,依据其下游表现评分。实验表明,该方法在排序质量上显著优于奖励模型及 LLM 裁判,有效提升了大模型在复杂数学推理任务中的评估准确性与区分度。

AI 推荐理由

论文聚焦研究级数学推理的无标准答案评估,直接提升推理能力验证。

研究机构
中国科学院
论文信息
作者 Guijin Son, Donghun Yang, Hitesh Laxmichand Patel, Hyunwoo Ko, Amit Agarwal et al.
发布日期 2026-02-06
arXiv ID 2602.06291
相关性评分 9/10 (高度相关)