Automated Review Critical Reasoning Scientific Critique LLM Evaluation
摘要

本文提出 E3,一种自动化评审助手,旨在通过识别研究论文中与决策相关的技术问题来增强评审者和工程团队的能力。针对每个问题,E3 报告其性质、位置、对贡献的影响以及解决所需的分析或证据,涵盖 unsupported claims、缺失消融实验、基线薄弱等隐患。为避免数据污染,研究采用问题级回测协议,利用元评判者对匿名评审进行标注。在 100 篇 ICLR 2026 论文上的评估显示,E3 在所有聚合指标上召回率最高,显著优于 GPT-5.4、Claude-Opus 及人类评审,能有效发现人类遗漏的关键问题。

AI 推荐理由

论文核心是 LLM 对科研论文的深度分析与逻辑批判,属于高阶推理应用。

研究机构
Sanyam Jain sanyam, parithi@noteavee.io
论文信息
作者 Yashwardhan Chaudhuri, Sanyam Jain, Paridhi Mundra
发布日期 2026-05-26
arXiv ID 2605.27072
相关性评分 8/10 (高度相关)