CreateEvaluator - 创建评估器-Agent 观测与优化 AgentLoop(AgentLoop)-阿里云帮助中心

创建评估器。

调试

下表是API对应的授权信息，可以在RAM权限策略语句的Action元素中使用，用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下：

操作

访问级别

资源类型

条件关键字

关联操作

agentloop:CreateEvaluator

create

*Workspace

acs:agentloop:{#regionId}:{#accountId}:agentspace/{#AgentSpaceName}

无

POST /api/v1/evaluators/{agentSpace} HTTP/1.1

名称	类型	必填	描述	示例值
agentSpace	string	是	AgentSpace 名称。	prod-agentspace

名称	类型	必填	描述	示例值
body	object	否	请求体。	{"name":"trace_task_completion","displayName":"链路任务完成度","type":"AGENT","metricName":"agent_task_completion","version":"1.0.0"}
annotations	array	否	注解标记列表。	["__en"]
	string	否	单个注解标记。	__en
config	object	否	评估器配置。LLM/AGENT 常包含 prompt、variables、outputSchema；CODE 常包含 codeType、faasConfig、variables、parameters。	{"prompt":"请评估任务完成度","variables":[{"name":"input"}]}
description	string	否	评估器描述，最长 256 字符。	判断 Agent 是否完成用户任务
displayName	string	否	显示名称，最长 128 字符。	链路任务完成度
metricName	string	是	评估指标名称。	agent_task_completion
name	string	是	评估器名称，不能以系统保留前缀开头，最长 128 字符。	trace_task_completion
properties	object	否	评估器属性。	{"agentEvaluatorMode":"raw_prompt"}
type	string	是	评估器类型。`LLM` 表示内联大模型评估器，`AGENT` 表示 StarOps 数字员工评估器，`CODE` 表示代码评估器。枚举值： AGENT : AGENT CODE : CODE LLM : LLM	AGENT
version	string	是	初始版本号。	1.0.0
versionDescription	string	否	版本描述。	初始版本
clientToken	string	否	幂等 Token。CloudSpec 声明了该查询参数，当前后端未做幂等比对。	a1b2c3d4-1234-5678-90ab-cdef12345678

正常返回示例

JSON格式

{
  "name": "trace_task_completion",
  "requestId": "3FE4CD1E-FF41-56BE-B590-7A021D9C1524",
  "version": "1.0.0"
}

访问错误中心查看更多错误码。

更多信息，参考变更详情。