任务标注功能使用介绍

功能概述

智能对话机器人上线使用过程中发生的机器人与用户间“错误交互”,可通过完成机器人与用户间的“问答标注”进行优化,从而可提升机器人回答准确率,进而可优化用户体验。当前支持两种类型的“问答标注”:聚类标注任务标注。任务标注是指以任务的形式进行数据标注。

说明
  • 错误交互:即在用户输出问题语句后,机器人未能从正面正确地回复用户问题。

  • 问答标注:即对机器人与用户问答内容的标注。标注实质上是一种判断,对机器人与用户问答内容的标注操作大致有“正确、错误、未覆盖、无效、待定”这五类,关于任务标注类型具体介绍请参考《任务标注操作类型》。

功能入口

进入智能对话机器人主界面后,选择运营中心>问答标注>任务标注,即可进入任务标注界面。具体界面如下图所示:

image

功能使用介绍

创建标注任务

  1. 进入任务标注界面后,点击“新建标注任务”按钮,进入“标注任务”新建界面;

image
  1. 进入“标注任务”新建界面后,根据实际业务需求选择“标注任务”中拉取的会话数据的筛选条件后,点击“确定”按钮完成“标注任务”新建。具体筛选条件含义及有关界面如下:

  • 时间段:即拉取的会话数据所产生的时间段;

  • 机器人:即产生会话数据的机器人;

  • 数据来源:包括“全部”、“C端问答”和“测试窗问答”;

  • 通话类型:包括“全部通话”和“仅‘答非所问’通话”。

说明
  • 系统会默认拉取当天的数据,也支持用户自定义时间拉取,其中数据最大拉取时间为3个月,数据量最大为10000条;

  • 新建“标注任务”时,系统会依据历史“标注任务”中的会话数据进行去重,即已包含在历史“标注任务”中的会话数据不再会出现在新建的“标注任务”中;

  • 时间段的开始时间和结束时间都表示所选日期的零点,其中结束时间不包含零点;

  • 答非所问通话:算法根据多个维度的特征判断一通对话是否属于答非所问并进行打标,通话类型用于把标记了答非所问的会话与全部会话进行区分。

image

进行数据标注

  1. 完成“标注任务”创建后,点击对应任务右侧“进入任务详情”按钮,进入任务详情界面;

imageimage

  1. 根据实际业务需求,选择“标注任务”中会话数据的筛选条件后,点击“搜索”按钮,完成会话数据筛选;

image
  1. 根据实际情况,批量逐条完成标注任务。具体标注操作类型含义与界面如下所示:

说明
  • 有关任务标注类型介绍具体请参考《任务标注操作类型》。

image
说明
  • 点击用户问法左侧的“对话”标签可查看有关会话完整数据,具体界面如下。

imageimage

统计数据查看

进入任务标注界面后,点击任务右侧“数据统计”按钮即可查看有关数据,具体有关操作与界面如下图所示:

imageimage