文档中心

AgentKit

评测中心

管理评估器

管理评估器

评估器用于定义评测任务的评分标准。每个评估器绑定一个评估模型和一套评分规则，针对一个评测维度给出评分。本文介绍如何查看系统内置评估器，以及如何新建、克隆、编辑和删除自定义评估器。

功能说明

评估器分为内置评估器和自定义评估器两类：

内置评估器：系统预置，覆盖初始需求处理、Spec 设计、编码实现、联调测试、人工补充需求融合等需求交付阶段。内置评估器不可编辑或删除，可直接用于评测任务，也可以克隆后调整为自定义评估器。

自定义评估器：由您手动新建，或通过克隆内置评估器生成。自定义评估器支持编辑、克隆和删除，可按团队的质量标准定制评分规则。

前提条件

当前账号在目标 DeliveryAI 空间中的角色为空间管理员。

查看评估器

在 DeliveryAI 用户端左侧导航树中，选择“评测中心 > 评估器”。

在“评估器”页面，通过顶部筛选按钮“全部”、“内置”、“自定义”筛选评估器范围，或是在搜索框中输入评估器名称关键字，快速检索目标评估器。

在列表中查看每个评估器的名称、类型、说明、描述、模式等关键字段。

字段	说明
名称	评估器的名称。内置评估器按“阶段-评估维度”命名，例如“Spec 设计-方案完整性与正确性”。
类型	标识评估器来源，取值为“内置”或“自定义”。
说明	介绍该评估器的评估目标和适用场景。
模式	评估器的评分模式，内置评估器均为 prompt 模式。
操作	对评估器可执行的操作，例如克隆、编辑、删除。

新建自定义评估器

当内置评估器不能满足团队的评分标准时，可以新建自定义评估器。

在 DeliveryAI 用户端左侧导航树中，选择“评测中心 > 评估器”。

在“评估器”页面右上角，单击“新建自定义评估器”按钮，打开创建面板。

参考下表，配置自定义评估器。

参数	说明
名称	输入评估器名称，建议体现评估阶段和评估维度，便于在评测任务中识别。
说明	输入评估器的评估目标、适用范围等说明。
模型	在下拉框中选择执行评分时使用的模型。
评分规则	输入评估器的评分标准和输出要求，支持 Markdown 编辑；输入“@”可引用产品上下文、模板与规范文档。

单击“保存”按钮，完成创建。创建成功后，评估器显示在“自定义”页签中。

克隆评估器

当您希望在内置评估器基础上调整评分规则时，可克隆该评估器，克隆后会生成一份同名自定义评估器，再按需修改。

在 DeliveryAI 用户端左侧导航树中，选择“评测中心 > 评估器”。

在评估器列表中，单击目标评估器“操作”列的图标。

在克隆评估器编辑页面中，确认或修改名称、说明、模型和评分规则。

说明

克隆生成的评估器名称默认在原名称后追加“副本”。

单击“克隆”按钮，生成自定义评估器。

管理自定义评估器

在“自定义”页签中，可对自定义评估器执行以下操作：

编辑：在评估器列表中，单击目标评估器“操作”列的图标，修改评估器的说明、模型和评分规则。

克隆：在评估器列表中，单击目标评估器“操作”列的图标，复制一份自定义评估器，用于在现有规则上快速创建新版本。

删除：在评估器列表中，单击目标评估器“操作”列的图标，删除不再使用的评估器。

说明

删除后该评估器不可恢复，且不可再用于新建评测任务，请谨慎操作。

最近更新时间：2026.09.17 17:23:10

这个页面对您有帮助吗？

有用

有用

无用

无用