英文:Tool-Call Accuracy 分类:eval
Agent 系统中模型生成工具调用的正确率:目标工具选择正确、参数完整且格式合法、参数值语义正确。是 Agent 可靠性的核心指标。
评测:工具调用基准(ToolBench、BFCL 类)、参数级校验(必填项/类型/枚举)、执行结果验证(调用后是否成功);错误类型:选错工具、漏参数、参数格式非法、幻觉参数;优化:工具 schema 清晰、示例微调。
用于 Agent 系统开发(工具接入验收)、Function Calling 模型选型、自动化流程(工单/查询)与 API 编排评测;工具调用准确率是"Agent 干活靠不靠谱"的度量。