Tool Use Text-to-SQL Agent Benchmark Semantic Retrieval
摘要

本文针对自然语言转 Jira 查询语言(JQL)中的歧义解析难题,提出了首个基于实时执行的大规模基准 Jackal。为解决单遍模型无法验证动态数据的问题,作者设计了 Agentic Jackal 智能体,集成 Jira MCP 服务器实现实时查询执行,并利用 JiraAnchor 工具通过嵌入相似度搜索解析分类值。实验表明,该代理方法显著提升了多个前沿模型的执行准确率,特别是在处理复杂语义歧义方面效果显著,揭示了当前技术的主要失败模式并开源了相关资源。

AI 推荐理由

论文核心提出工具增强型 Agent,通过实时执行和语义检索解决特定领域查询生成难题。

研究机构
Commercial Technology and Innovation Office, PricewaterhouseCoopers, U.S.
论文信息
作者 Vishnu Murali, Anmol Gulati, Elias Lumer, Kevin Frank, Sindy Campagna et al.
发布日期 2026-04-10
arXiv ID 2604.09470
相关性评分 9/10 (高度相关)