Tool Use Robustness Evaluation MCP Fault Injection
摘要

本文提出 AgentCheck,一个开源 Web 工作台,旨在解决工具型 LLM Agent 在部署中面临工具超时、数据过时或描述被投毒等故障时的评估难题。该系统通过将 MCP 服务器转化为干预面,记录并重放工具响应,注入多种故障以复现失败场景,形成“复现 - 干预 - 确认”闭环。实验表明,该框架能有效量化不同 Agent 对工具故障的鲁棒性,并验证重试等缓解策略的有效性,填补了工具可靠性测试的空白。

AI 推荐理由

论文核心研究 Agent 在工具故障下的表现与缓解,直接涉及工具使用技能的鲁棒性评估。

研究机构
University of Utah University of Dhaka
论文信息
作者 Aritra Mazumder, Nusrat jahan Lia
发布日期 2026-07-13
arXiv ID 2607.11098
相关性评分 9/10 (高度相关)