文档

考试中心

更新时间:

考试中心为管理者提供了一个标注考试的平台,用于培训及考核新标注人员,通过考试验证学习成效,确保标注人员掌握必备知识与技能,以提升标注的准确性与一致性,筛选合格人员。此外,考试中心也能服务于持续教育与技能强化。本文为您介绍如何使用考试中心。

使用流程说明

image

操作步骤

  1. 进入智能标注(iTAG)。

    1. 登录PAI控制台

    2. 在左侧导航栏单击工作空间列表,在工作空间列表页面中单击待操作的工作空间名称,进入对应工作空间。

    3. 在左侧导航栏,选择数据准备>智能标注(iTAG)

  2. 单击前往管理页,然后单击考试中心,跳转至智能标注新版页面。

    image

  3. 管理中心>租户配置页面的考试中心页签下,单击创建考试

    1. 数据选择

      1. 选择数据集,单击下一步

      2. 配置子任务包分配,单击下一步

    2. 模板选择

      1. 选择模板,单击编辑进行配置。

      2. 完成配置后,单击下一步。配置模板的具体操作,请参见模板概述

    3. 考试配置

      参数

      说明

      考试名称

      自定义考试名称。

      考试模式

      考试模式分为以下两种。

      • 自动阅卷:自动映射答案,完成批卷,需要在数据集中包含一列答案字段用于映射。

      • 手动阅卷:人工完成每一份试卷的审核,需要配置阅卷人员,无需配置答案。

      考试人员/组

      设置考试人员,如果后期创建正式任务,并关联此考试,会自动添加考试人员/组。

      合格阈值

      取值范围为1%~100%,考卷正确率达到阈值即为合格。

      最大考试次数

      考试人员可以重试的次数。

  4. 单击创建任务,完成创建。

    说明

    考试创建完成,在正式任务-高级配置-关联考试中,可以关联已创建好的考试,可多选。关联考试后,该任务需要标注人员通过考试后才可进行标注。

管理考试

管理中心>租户配置页面的考试中心页签,您可以对已创建的考试进行如下操作:

  • 单击操作列的考试详情,查看该考试包含的子任务包及详细考试页面。

  • 对于已经完成的考试,单击操作列的导出考试,可以下载考试情况,进行错题等深度统计。

  • 单击操作列的追加试卷数量,可以追加试卷数量。

  • 单击操作列的获取标注结果,可以获取标注结果,与导出标注结果数据类似。

  • 单击考试名称,在考试配置>分发信息页面,管理者可以修改允许重试次数,来确定是否通过考试。单次不通过将支持重考,多次不通过将取消资格进行任务剔除。

    image

  • 本页导读