文档

视觉问答

更新时间:

视觉问答模板可以根据您提供的图片,对图片的内容进行问答,问答均可接入机器人UDF。其中,单轮对话指问题和答案不考虑上下文内容;多轮对话指问题和答案会结合上下文产出。

数据格式示例

说明

CSVXLSX格式中每一列数据;Manifest格式中data字段的下一级字段均对应一个数据集字段,字段名可自定义,在配置数据集字段名时选择对应的字段名即可。图片文件支持常见的JPG、PNG等格式。

CSVXLSX格式

image_url

oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/1.jpg

oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/2.jpg

文件Demo参考:图像语义分割数据demo.csv

Manifest格式(JSONL格式)

{"data":{"image_url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/1.jpg"}}
{"data":{"image_url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/10.jpg"}}
{"data":{"image_url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/11.jpg"}}

文件Demo参考:图像语义分割数据demo.manifest

配置说明

题目区(必选)

题目区用于配置话题字段。

image

单击选中题目后,并选择相应的数据集,在右侧配置区域配置具体参数。参数说明如下:

参数

说明

标题

默认标题区域无需修改。

数据集字段

在数据集字段中选择话题图片的URL字段。(字段名可自定义)

提示

默认提示区域无需修改。

点击链接跳转

无需配置,不生效。

文本高亮

无需配置,不生效。

卡片样式配置

无需配置,不生效。

问题区(可选)

问题区用于配置围绕提问机器人文本的相关题目。

image

单击问题后,在右侧配置区域配置具体参数。参数说明如下:

参数

说明

标题

可根据需要配置问题标题。

选项

说明

当答题类型为单选多选树选择时,需要配置此参数。

  • 当答题类型为单选多选时,可以通过手工录入数据集导入配置,词典搜索暂时无法使用。

  • 当答题类型为树选择时,仅支持手工录入配置。

占位文本

说明

当答题类型为单行输入框输入框-Markdown预览时,需要配置此参数。

填空题占位文字,用于引导用户输入内容。

提示

配置悬停在题目标题上时出现的提示文字。

是否必填

配置题目是否为必填项,若为必填则答题时会进行必填校验。

支持搜索选项

说明

当答题类型为单选多选时,需要配置此参数。

配置后可以进行选项的搜索。

生效阶段

题目的生效阶段,不选时默认全流程生效。

答题区(可选)

答题区用于配置围绕回答机器人文本的相关题目。

image

单击问题后,在右侧配置区域配置具体参数。参数说明如下:

参数

说明

标题

可根据需要配置问题标题。

占位文本

说明

当答题类型为单行输入框输入框-Markdown预览时,需要配置此参数。

填空题占位文字,用于引导用户输入内容。

选项

说明

当类型为单选多选树选择时,需要配置此参数。

  • 当答题类型为单选多选时,可以通过手工录入数据集导入配置,词典搜索暂时无法使用。

  • 当答题类型为树选择时,仅支持手工录入配置。

提示

配置悬停在题目标题上时出现的提示文字。

支持搜索选项

说明

当答题类型为单选多选时,需要配置此参数。

配置后可以进行选项的搜索。

是否必填

配置题目是否为必填项,若为必填则答题时会进行必填校验。

生效阶段

题目的生效阶段,不选时默认全流程生效。

全局题目区(可选)

全局题目区用于根据需要针对整个主题提出问题。

image

单击选中题目后,在右侧配置区域配置具体参数。参数说明如下:

参数

说明

标题

可根据需要配置问题标题。

占位文本

说明

当答题类型为单行输入框输入框-Markdown预览时,需要配置此参数。

填空题占位文字,用于引导用户输入内容。

选项

说明

当答题类型为单选多选树选择多选树选择时,需要配置此参数。

  • 当答题类型为单选多选时,可以通过手工录入数据集导入配置,词典搜索暂时无法使用。

  • 当答题类型为树选择多选树选择时,仅支持手工录入配置。

提示

配置悬停在题目标题上时出现的提示文字。

是否必填

配置题目是否为必填项,若为必填则答题时会进行必填校验。

支持搜索选项

说明

当答题类型为单选多选时,需要配置此参数。

配置后可以进行选项的搜索。

生效阶段

题目的生效阶段,不选时默认全流程生效。

全局配置

全局配置用于配置模板中会使用到的UDF。

单击image,在右侧可以进行问答机器人的配置,选择机器人的UDF之后添加配置参数即可。

重要

此处UDF配置需严格按照示例进行配置,input_dataMarkResult用于让UDF正确接收输入参数,不可随意更改。

  • 单轮对话配置如下:

    image

  • 多轮对话配置如下:

    image

操作演示

  1. 单击发起问答,提问机器人会自动提出问题,用户可根据问题文本进行答题(题目为自行配置的),若对文本不满意可进行改写。

  2. 确定问题文本后,再次单击发起问答,回答机器人会自动回答上一轮的问题,用户可根据问题文本进行答题(题目也为自行配置的),若对文本不满意可进行改写。

  3. 您可以根据需要多次发起问答。

说明

如果是单轮对话模板,对话时不会携带历史对话分析;如果是多轮对话模板,对话时会携带历史对话分析。

image

  • 本页导读 (1)
文档反馈