Intelligent Tutoring Systems Logic Reasoning Feedback Diagnosis LLM Evaluation
摘要

有效辅导需区分最优、有效但次优及错误的学生解法,这对智能辅导系统至关重要。本文构建了包含万余组解法 - 反馈对的基准,评估七种 LLM 辅导代理在命题逻辑中的诊断精度。结果显示,模型虽能准确识别最优步骤,却系统性拒斥有效但次优的推理并误判错误解法,而这正是自适应辅导的关键所在。此外,准确诊断未必转化为可操作的教学反馈,表明诊断判断与教学实效间存在差距。

AI 推荐理由

论文核心评估 LLM 对逻辑推理步骤的诊断精度,涉及区分最优、次优及错误推理的能力。

研究机构
North Carolina State University
论文信息
作者 Tahreem Yasir, Wenbo Li, Sam Gilson, Sutapa Dey Tithi, Xiaoyi Tian et al.
发布日期 2026-05-15
arXiv ID 2605.16207
相关性评分 8/10 (高度相关)