事实核查 科学文献 证据检索 LLM 可靠性
摘要

大型语言模型生成的报告中,主张与引用证据不一致是常见缺陷,限制了其在科学等高风险领域的可靠性。本文提出 DeepSciVerify,一种两阶段科学主张 - 引用验证流程,结合摘要级推理与选择性证据升级至段落级。系统首先利用摘要验证主张,仅在不确定时检索并分析全文段落。该设计利用了不同 LLM 在不确定性下的互补行为。在 SCitance 基准测试中,DeepSciVerify 的 Micro-F1 达到 86.7,优于纯摘要基线 4.5 分,且无需全文检索即可解决 67% 的案例,显著提升了验证的准确性与效率。

AI 推荐理由

论文核心在于利用 LLM 进行摘要级推理及证据升级,以验证科学主张与引用的对齐。

研究机构
Equal contribution. FirstPrinciples 'School of Computing Science, Simon Fraser University. Correspondence to: FirstPrinciples
论文信息
作者 Shaghayegh Sadeghi, Khashayar Khajavi, Rise Adhikari, Alexander Tessier
发布日期 2026-05-26
arXiv ID 2605.27710
相关性评分 8/10 (高度相关)