Reinforcement Learning Multi-domain Optimization LLM Reasoning Cross-domain Conflict
摘要

可验证奖励的强化学习在推理导向大语言模型中进展显著,但扩展至多领域时面临非可验证任务奖励不可靠及跨域能力干扰的挑战。本文提出 CARE-RL,结合协议感知奖励生成与能力感知优化以缓解跨域冲突。针对非可验证任务,协议感知生成奖励模型构建提示级评估协议,实现开放回答的任务自适应评估;针对多领域优化,方向感知能力子空间投影提取历史能力方向,通过放大对齐分量、抑制冲突分量来调节更新。实验表明该方法在数学、对话等基准上优于现有基线。

AI 推荐理由

论文针对推理导向 LLM 的多领域 RL 优化,核心解决跨域冲突以提升推理能力。

研究机构
National University of Singapore
论文信息
作者 Rui Zhang, Xinle Wu, Yao Lu
发布日期 2026-05-30
arXiv ID 2606.00609
相关性评分 8/10 (高度相关)