Chain-of-Thought Intermediate Supervision Complex Reasoning Dependency-Aware
摘要

思维链(CoT)监督虽能暴露中间推理过程,但扁平化的目标通常仅优化单一序列,缺乏对局部结论如何支持后续决策的有效监督。本文提出依赖感知中间问答监督(DAIS)框架,将筛选后的教师推理转化为阶段级问答记录。每个中间记录基于先前状态预测局部答案,而最终记录保持原始任务格式。在多个基准测试及 Qwen 模型上的实验表明,DAIS 显著提升了最终答案准确率,尤其在策略合规任务中平均提升 4.2%。消融实验证实,有效的先前状态条件化优于单纯增加文本长度或中间内容。

AI 推荐理由

论文提出依赖感知中间监督框架,直接优化思维链推理中局部结论对后续决策的支持机制。

研究机构
Xi'an Jiaotong University Huawei Technologies Ltd.
论文信息
作者 Yu Wang, Ming Fan, Xicheng Zhang, Zhiyong Li, Zhihu Wang et al.
发布日期 2026-07-21
arXiv ID 2607.19088
相关性评分 9/10 (高度相关)