Tool Use Natural Language Tools Agent Reliability Replication Study
摘要

本研究独立复现并扩展了 Johnson 等人提出的自然语言工具(NLT)框架,质疑结构化工具调用的必要性。通过在 14 个模型上进行 8560 次试验,结果显示 NLT 将工具调用准确率提高了 14.9%,关键错误减少 93%,并降低 25.2% 的 token 消耗。研究发现模型能力调节 NLT 优势,非原生支持或小型模型获益显著,而高度优化的前沿模型增益较小。该工作证实 NLT 是生产系统中优于结构化调用的可靠替代方案。

AI 推荐理由

论文核心研究自然语言工具调用机制,直接提升 Agent 技能使用的准确率与可靠性。

研究机构
Sage.is AI-UI
论文信息
作者 Alexander Somma, Isabelle Plante, Fred Premji
发布日期 2026-07-04
arXiv ID 2607.03953
相关性评分 9/10 (高度相关)