摘要
必然性与可能性的推理依赖于世界间的可及性及对象存在的假设,同一推论在不同模态系统下结果可能相反。为评估语言模型是否遵循既定语义而非熟悉逻辑,我们构建了前提与猜想相同但框架或域条件不同的配对模态问题,并通过自动推理验证标签对立。实验显示,在未启用推理模式时,多数模型表现低于基线;但开启推理模式后,DeepSeek V4 Flash准确率显著提升。结果表明,遵循指定模态语义高度依赖推理模式及模型身份。
AI 推荐理由
论文直接评估LLM在模态逻辑推理中的表现,探讨其遵循语义规则的能力,属于核心推理研究。
研究机构
Univ. Lille, Inria, CNRS, Centrale Lille, UMR 9189 - CRIStAL, F-59000 Lille, France
论文信息