创建及管理群组离线服务

限制说明

为保障数据的高可用，运行群组离线服务时，系统会将数据写入临时表（{目标表}_dpfx_b）；写入完成后，将原目标表进行重命名（{目标表}_dpfx_tmp），目标表重命名后将临时表重命名为目标表；最后删除原目标表（{目标表}_dpfx_tmp）。在重命名原目标表完成后，将临时表重命名为目标表完成前，数据将存在短暂不可用时间。

前提条件

• 已创建群组离线服务关联的应用。具体操作，请参见创建及管理应用。

• 创建群组离线服务前您需创建对应的实体。具体操作，请参见创建及管理实体。

创建群组离线服务

1. 在Dataphin首页的顶部菜单栏中，选择标签 > 标签应用。

2. 在左侧导航栏中选择服务管理 > 群组离线服务。

3. 在群组离线服务页面，单击新建离线服务。

4. 在新建离线服务配置页面中，配置以下参数。

   参数		描述
   基本信息	任务名	填写任务名称。命名规则如下： 允许中文、英文、数字、下划线（_）, 64个字符以内。
   	应用选择	选择已关联项目的应用。
   	负责人	选择该群组离线服务的负责人。
   	调度类型	支持周期调度和手动调度任务类型。 手动调度：一次集成，任务发布后可在任务列表页选择手动执行。 周期调度：调度执行，根据配置周期调度执行。
   	描述	填写任务的简单描述信息，1000个字符以内。
   字段映射	群组选择	选择您需配置的群组。
   	是否需要同步标签	默认为否，仅同步群组的实体ID；若选择是，则可以在输入标签中选择需要同步的标签。
   	目标数据源	选择群组服务对应的目标数据源。目标数据源可以为在Dataphin创建的MySQL、Oracle、AnalyticDB for PostgreSQL、Greenplum、openGauss数据源和项目。 说明 项目的目标数据源仅支持当前账号加入的项目（通用与标签项目）且项目生产账号具有同步写权限。 若无所需数据源，您可以单击+新建数据源进行创建。具体操作，请参见数据源管理。
   	Schema	目标数据源类型为openGauss、AnalyticDB for PostgreSQL、Greenplum时，支持选择数据源的Schema。
   	目标表	选择目标数据源中的目标表。openGauss、AnalyticDB for PostgreSQL、Greenplum数据源类型为Schema下的目标表。 跨项目安全模式开启，不支持跨项目建表。更多信息，请参见安全设置。 若没有当前目标表生产环境的写表数据权限，您可以单击申请权限进行权限申请。更多信息，请参见申请、续期和交还表权限。 若无对应目标表，选择输入标签后，可以单击一键建表创建所需的目标表。 在系统生成的建表语句中，请确认表名、字段类型、精度等是否符合需求后再单击新建。 表名和表备注都均由系统自动生成，可以按需要进行修改。 系统生成的建表语句参考输入标签的类型并进行了初步的转换，可以按需修改。 目标数据源为项目时，系统将默认生成分区表，建议不做调整。 目标数据源类型为AnalyticDB for PostgreSQL时，不支持选择分区表。 选择输入标签后，可以配置导出的标签的代码值和代码名称。可以单独导出标签值或代码名称，也可以全部导出，但至少要导出一个。 一键建表时，若标签已配置码表，可选择代码名称导出。导出代码名称为{标签code}_codename。一键建表后，系统将自动映射字段。
   	日期分区	选择目标表的分区字段。 若所选目标表为分区表，则系统将默认该表的第一个分区字段。 若所选目标表为非分区表，则无需选择日期分区。
   	分区字段格式	输入日期格式，或选择已有的日期格式。可选择yyyyMMdd、yyyy-MM-dd、yyyy/MM/dd、yyyy.MM.dd。 说明 仅当计算引擎为MaxCompute时，分区字段格式可选择为yyyymmdd、yyyy-mm-dd、yyyy/mm/dd或yyyy.mm.dd。
   	加载策略	加载策略仅支持覆盖策略；在覆盖数据策略下，当主键/约束冲突时，会先删除原数据，再插入整行新数据。
   	映射字段	不需要同步标签时，选择需要映射的字段。 同名映射：单击同名映射，将相同名称的标签及其映射字段进行关联。 清除：单击图标，将已映射关系清除。 输出内容：选择已配置码表的标签的输出内容，可选择标签值和代码名称。默认全选标签值。可选中输出标签列表下方的标签值和代码名称进行全选（全部页面）。
   运维配置	调度周期	在特定时间范围内进行任务调度的周期。支持按日调度。群组离线任务将按照配置的调度时间进行按日调度运行。

5. 单击发布，即可完成群组离线服务任务的创建。

管理群组离线服务

1. 群组离线服务页面中展示任务名、负责人、应用名、群组名、实体、实体ID、任务状态、执行状态、目标表、调度类型以及支持的操作等信息。

   鼠标悬停至目标表，支持查看目标表的全称和目标数据源名称。若目标数据源类型为openGauss，还支持查看目标表Schema。

2. （可选）可通过选中只看我的、输入任务名称或单击筛选根据应用名、实体-实体ID、目标源类型、任务状态、执行状态、调度类型进行筛选。

3. 在群组离线服务任务列表的操作列中，可执行以下操作。

   操作项	描述
   编辑	任务状态不为发布中或下线中时，可单击图标，在编辑离线服务页面编辑后重新发布，不支持修改任务名、调度类型、目标数据源类型和加载策略。
   详情	单击图标，在查看离线服务页面查看当前标签离线服务的详细信息。任务状态为编辑中、发布失败、已发布或已下线时，可单击页面底部的编辑，可编辑当前群组离线服务。
   查看实例	单击图标，可查看当前群组离线服务生成的执行实例。
   下线	任务状态为已发布或下线失败的群组离线服务，可单击下线图标，下线当前的群组离线服务。
   补数据	任务状态为已发布状态的周期调度群组离线服务，可单击补数据图标进行补数据，默认补业务日期为昨天（T-1）的数据。
   运行	对于调度类型为手动调度的任务，可以单击运行图标，在运行对话框中选择业务日期手动运行。
   删除	任务状态为已下线或发布失败状态的群组离线服务，单击删除图标可以删除当前群组离线服务。