PROTEA：多智能体 LLM 工作流的离线评估与迭代优化

多智能体 LLM 工作流虽性能优越，但调试困难。本文提出 PROTEA，一种用于工作流离线测试驱动改进的统一接口。该系统执行工作流，利用可配置规则评分中间节点输出，并通过反向节点评估定位瓶颈。针对选定节点，PROTEA 提供可编辑的提示词修订方案，自动重跑并展示效果变化。实验表明，该方法显著提升了文档检查准确率及推荐系统命中率，获得了开发者的高度评价。