文档

评测维度

更新时间:
一键部署

维度描述是用户评测时所看到的维度明细文案。

名词解释

专有名词

解读

模板名称

可以自定义设置名称

维度名称

检验维度的名称

维度说明

方便评测人员了解维度具体含义,选填

维度描述

维度描述是用户评测时所看到的维度明细文案,如数字型如“1分-7分”的7阶维度,文本型如“非常差、较差、一般、较好、好”5阶维度

对应获得分值

维度分值用于报表分值计算和报表生成,默认从左往右为1-N分,左侧分数最小,右侧分数最大,可自定义分数逻辑,与维度描述映射,如非常差-1、较差-2、一般-3、较好-4、好-5,用户评测时仅会看到描述,不会看到分值,分值为后台计算逻辑;

默认可以增加10个维度,创建好后,点击完成。

创建维度模板

依据评测需求增加维度模板,支持自定义多级维度、多级分数,预置多种维度模板,可应用于主流评测任务。

说明

自定义维度:依据业务需求自定义评测维度,更好地从业务角度评测模型效果,支持多级、多维度、自定义分数功能,适用于特定业务效果的评测。

系统预置维度:系统预置的评测维度,如综合评价维度、摘要任务维度、生成式任务维度、分类维度等,适用于一般性通用任务效果的评测。

引用维度模板:在模型评测中选择此处创建的维度模板,评测任务发起后,评测同学基于已选择的评测维度进行评测。

image

操作说明

  1. 依据业务需要设计评测维度模板,设计指标体系及分数。

  2. 新增维度模板,完成分级配置、分数配置及说明配置。

  3. 创建评测任务时可引用及预览维度模板。

  4. 依据业务需求对维度模板进行优化、管理和删改。

说明

维度说明:将以tips展示在维度名称旁边,方便评测人员了解维度具体含义。

image

查看模板列表

创建完成后支持查看和删除模板。

image