指令遵循率

英文:Instruction Following Rate 分类:eval

基本释义

模型正确遵循用户指令与约束(格式、长度、步骤、语气)的比例,衡量"听不听话",是实用型模型的核心能力指标。

技术要点

评测:指令遵循基准(IFBench 类:约束项判定)、结构化输出合规率、人工检查;失遵表现:忽略约束(超字数)、格式错误、多输出一个答案;提升:指令微调数据(约束丰富)、系统提示强化。

应用场景

用于助手类模型验收(IF 分数)、Agent 工具调用(参数格式)、内容生成(字数/风格约束)与产品化评测;指令遵循率是"可用性"的量化标尺。

返回AI百科目录 · AI最前沿首页

相关词条:大模型评审 · 聊天机器人竞技场 · 数据治理 · 一致性 · 工具调用准确率