考试中心为管理者提供了一个标注考试的平台,用于培训及考核新标注人员,通过考试验证学习成效,确保标注人员掌握必备知识与技能,以提升标注的准确性与一致性,筛选合格人员。此外,考试中心也能服务于持续教育与技能强化。本文为您介绍如何使用考试中心。
使用流程说明
操作步骤
进入智能标注(iTAG)。
登录PAI控制台。
在左侧导航栏单击工作空间列表,在工作空间列表页面中单击待操作的工作空间名称,进入对应工作空间。
在左侧导航栏,选择数据准备>智能标注(iTAG)。
单击前往管理页,然后单击考试中心,跳转至智能标注新版页面。
在管理中心>租户配置页面的考试中心页签下,单击创建考试。
数据选择
选择数据集,单击下一步。
配置子任务包分配,单击下一步。
模板选择
选择模板,单击编辑进行配置。
完成配置后,单击下一步。配置模板的具体操作,请参见模板概述。
考试配置
参数
说明
考试名称
自定义考试名称。
考试模式
考试模式分为以下两种。
自动阅卷:自动映射答案,完成批卷,需要在数据集中包含一列答案字段用于映射。
手动阅卷:人工完成每一份试卷的审核,需要配置阅卷人员,无需配置答案。
考试人员/组
设置考试人员,如果后期创建正式任务,并关联此考试,会自动添加考试人员/组。
合格阈值
取值范围为1%~100%,考卷正确率达到阈值即为合格。
最大考试次数
考试人员可以重试的次数。
单击创建任务,完成创建。
说明考试创建完成,在正式任务-高级配置-关联考试中,可以关联已创建好的考试,可多选。关联考试后,该任务需要标注人员通过考试后才可进行标注。
管理考试
在管理中心>租户配置页面的考试中心页签,您可以对已创建的考试进行如下操作:
单击操作列的考试详情,查看该考试包含的子任务包及详细考试页面。
对于已经完成的考试,单击操作列的导出考试,可以下载考试情况,进行错题等深度统计。
单击操作列的追加试卷数量,可以追加试卷数量。
单击操作列的获取标注结果,可以获取标注结果,与导出标注结果数据类似。
单击考试名称,在考试配置>分发信息页面,管理者可以修改允许重试次数,来确定是否通过考试。单次不通过将支持重考,多次不通过将取消资格进行任务剔除。
- 本页导读