Continual Learning GUI Agents Reinforcement Fine-Tuning Gradient Surgery
摘要

图形用户界面(GUI)智能体虽受益于多模态大模型,但在应用频繁更新背景下,如何在不忘旧任务的前提下适应新任务仍是难题。本文提出持续 GUI 学习(CGL)框架,利用强化学习抵御知识覆盖,动态平衡监督微调与强化训练。通过基于策略熵的比例调整机制及专用梯度手术策略,显式消除梯度冲突。此外,构建了 AndroidControl-CL 基准以评估持续学习性能,实验证明了该方法的有效性。

AI 推荐理由

论文核心解决 GUI Agent 的持续学习与自我适应问题,防止遗忘并提升新任务适应能力。

研究机构
哈尔滨工业大学 华为诺亚方舟实验室 University College Dublin 北京大学
论文信息
作者 Zhenquan Yao, Zitong Huang, Yihan Zeng, Jianhua Han, Hang Xu et al.
发布日期 2026-03-03
arXiv ID 2603.02951
相关性评分 9/10 (高度相关)