图文解释模板_人工智能平台 PAI(PAI)-阿里云帮助中心

图文解释模板用于关联图片选区与文本实体。

数据格式示例

说明

CSV及XLSX格式中每一列数据；Manifest格式中data字段的下一级字段均对应一个数据集字段，字段名可自定义，在配置数据集字段名时选择对应的字段名即可。图片文件支持常见的JPG、PNG等格式。

sam_embedding_url用于SAM分割的embedding数据，目前使用前需要用户自行预处理。如果不做预处理或无需使用该功能，可直接删除此字段，不影响模板正常使用。

CSV及XLSX格式

url	caption	sam_embedding_url
oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/1.jpg	"caption1xxxxx"	https://xxxxx
oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/1.jpg	"caption2xxxxx"	https://xxxxx

Demo:图文解释数据demo.csv

Manifest格式（JSONL格式）

{"data":{"url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/1.jpg","caption":"caption1xxxxxx","sam_embedding_url":"https://xxxxx"}}
{"data":{"url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/10.jpg","caption":"caption1xxxxxx","sam_embedding_url":"https://xxxxx"}}
{"data":{"url":"oss://****.oss-cn-hangzhou.aliyuncs.com/iTAG/pic/11.jpg","caption":"caption1xxxxxx","sam_embedding_url":"https://xxxxx"}}

Demo：图文解释demo.manifest

配置说明

标注区（图片）（必选）

标注区（图片）用于配置需要进行标注的图片URL字段。

单击选中标注区（图片），并选择相应的数据集后，在右侧配置区域配置具体参数。参数说明如下：

参数	说明
标题	默认标题区域无需修改。
数据集字段	在数据集字段中选择需要标注的图片URL字段。（字段名可自定义）
提示	默认提示区域无需修改。
数据预处理	无需配置，不生效。
接入方式	无需配置，不生效。
卡片样式配置	无需配置，不生效。

标注区（caption）（必选）

标注区（caption）用于配置需要标注解析的文字字段。

单击选中标注区（caption）后，在右侧配置区域配置具体参数。参数说明如下：

参数	说明
标题	默认标题区域无需修改。
数据集字段	在数据集字段中选择需要标注解析的文本字段。
提示	默认提示区域无需修改。
点击链接跳转	无需配置，不生效。
文本高亮	无需配置，不生效。
卡片样式配置	无需配置，不生效。

SAM分割预处理区（可选）

SAM分割预处理用于从数据集中获取使用SAM分割的embedding字段。若无需使用SAM分割预处理需要点击将该分区删除。

单击选中SAM分割预处理后，在右侧配置区域配置具体参数。参数说明如下：

参数	说明
标题	默认标题区域无需修改。
数据集字段	在数据集字段中选择使用SAM分割的embedding字段，可以配置该字段来提升页面SAM分割工具的加载速度。如果不配置，单击右上角的删除。
提示	默认提示区域无需修改。
点击链接跳转	无需配置，不生效。
文本高亮	无需配置，不生效。
卡片样式配置	无需配置，不生效。

操作演示

使用图文解释模板进行标注。

文字标注
1. 在caption文字标注区选中需要标注的文字，单击确认，即可生成一条实体文本对象。
2. 在文本实体区可以修改文字标注颜色或者删除实体。在文字标注区，单击已经标注的词汇，也可以进行删除操作。
图片标注
1. 在图片工具区，选择对应的抠图工具对页面进行抠图，新建选区后，填写抠图对象名称，会在右侧抠图列表中显示。
2. 在右侧选中抠图后可以重新更新当前图片。
关联文字和图片
在右侧图片处选择下拉框中的图片，可以将文本实体和对应图像关联起来。