Multimodal LLM User Experience UI Reasoning Reinforcement Learning Benchmark
摘要

针对多模态大语言模型(MLLM)在用户界面(UI)用户体验评估方面研究的不足,本文提出了 UXBench 基准,包含 2000 个样本以评估基于 UI 的推理能力。实验表明主流模型在此任务上表现受限。为此,作者提出 UI-UX 模型,基于 Qwen3-VL 并通过强化学习增强,引入奖励路由机制平衡感知与逻辑推理,以及非对称转移奖励抑制冗余步骤。该模型在 UXBench 上取得最先进性能,准确率显著超越现有模型,兼具强泛化性与低延迟。

AI 推荐理由

论文核心在于评估和提升 MLLM 在 UI 场景下的细粒度推理能力,提出专用推理模型。

研究机构
Ant Group
论文信息
作者 Ruichao Mao, Zhou Fang, Teng Guo, Hao Yang, Yaping Li et al.
发布日期 2026-06-11
arXiv ID 2606.13192
相关性评分 9/10 (高度相关)