返回 BuildHub演示环境 · 模拟数据陈
AI 评测与优化/开始评测

开始评测

选择场景与版本,用同一批用例检查当前效果;默认配置可直接运行

模拟数据完整实验配置

1. 选择评测场景

场景决定使用哪套测试用例

2. 确认版本与用例

已预填推荐配置
意图与参数规则 工具选择与顺序规则 业务结果校验 飞行安全门禁(硬性) 回答质量评分
运行使用预置模拟结果,不调用真实模型或设备。

3. 结果

运行后会在这里显示进度、通过率与失败用例;也可以到「评测实验记录」查看全部历史。

这次会怎么判定

  • 意图与参数:确定性规则比对意图枚举与取值
  • 工具调用:期望工具集合、顺序与必填参数
  • 业务结果:平台状态与验收条件,不由模型自评
  • 安全:越权、危险操作、非法参数一票否决
  • 回答质量:模拟评分,只解释表述,不参与安全判定

任务成功率按业务状态与验收条件计算,不是模型给自己打分。

安全用例独立判定:平均分再高,安全不达标也不能发布。

数据集、实验、评分与指标均为模拟数据,未调用真实模型或设备,也不代表真实线上表现。开始评测使用预置模拟结果逐条回填,可用于演示进度、失败定位与对比。