AI4Science Reasoning Benchmark Scientific Discovery Dependency Analysis
摘要

科学进步依赖于一系列促成性贡献,但现有 AI4Science 基准多关注引用预测或文献检索,忽视了实现进步所需的依赖关系。本文提出“发现路径预测”任务:给定目标科学贡献及特定时间前的文献,要求识别实现该目标所需的促成贡献,并将其锚定于 prior work。我们构建了 SciPaths 基准,包含 262 条专家标注的金标准路径和 2444 条银标准路径。评估显示,最佳模型在严格语义匹配下的 F1 值仅为 0.189,核心方法依赖最难恢复。提供金标准促成贡献可显著提升锚定效果,表明分解质量是端到端路径恢复的主要瓶颈。

AI 推荐理由

论文核心是评估模型逆向推理科学发现依赖路径的能力,属于复杂逻辑推理任务。

研究机构
Equal contribution University of Cambridge, Cambridge, United Kingdom The Alan Turing Institute, London, United Kingdom
论文信息
作者 Eric Chamoun, Yizhou Chi, Yulong Chen, Rui Cao, Zifeng Ding et al.
发布日期 2026-05-14
arXiv ID 2605.14600
相关性评分 8/10 (高度相关)