完成数据源、网络、资源的准备配置后,您可创建数据同步任务并执,开始进行数据同步。本文为您介绍如何创建数据同步任务,并在创建完成后查看任务运行情况。
创建同步解决方案任务
- 登录并进入数据集成页面,单击,进入同步解决方案页面。
- 在解决方案任务列表页面,单击右上方的新建任务。
- 在新建同步解决方案对话框中,单击一键实时同步至MaxCompute。
- 完成方案名称等基本信息配置。
在
基本配置区域,配置各项参数。

参数 |
描述 |
方案名称 |
同步解决方案的名称,最多支持50个字符。 |
描述 |
对当前方案进行简单描述,最多支持50个字符。 |
目标任务存放位置 |
默认创建一个新的业务流程,所有任务均以clone_database_源端数据源名称+to+目标数据源名称的命名方式存放至数据集成目录下。
您也可以取消自动建立工作流程,在选择位置下拉列表中指定存放目标任务的路径。
|
- 选择来源数据源并配置同步规则。
- 在数据来源区域,选择类型和数据源。
说明 仅支持选择MySQL、Oracle和PolarDB类型的数据源。
- 在选择同步的源表区域,选中需要同步的源表,单击
图标,将其移动至已选源表。
该区域会为您展示所选数据源下所有的表,您可以选择整库全表或部分表进行同步。
- 在设置同步规则区域,单击添加规则,选择相应的规则进行添加。
同步规则包括
表名转换规则和
目标表名规则:
- 表名转换规则:转换表名为目标表名,进行字符串替换。
- 目标表名规则:支持对转换后的表名添加前缀和后缀。
- 单击下一步。
- 选择目标数据源并配置目标表格式。
- 在设置目标表页面,选择目标MaxCompute(ODPS)数据源和写入模式。
- 单击MaxCompute(ODPS)时间自动分区设置后的
图标,在编辑对话框中,修改目标MaxCompute分区的设置(支持天和小时级别的分区)。
- 单击刷新源表和MaxCompute(ODPS)表映射,创建需要同步的源表和目标MaxCompute表的映射关系。
- 查看任务的执行进度和表来源。

序号 |
描述 |
① |
显示映射关系的创建进度。
说明 如果同步的表数量较多,会导致执行进度较慢,请耐心等待。
|
② |
表建立方式包括自动建表和使用已有表。
|
③ |
选择的表建立方式不同,此处显示的MaxCompute表名也不同:
- 当选择表建立方式为自动建表时,显示自动创建的MaxCompute表名称。您可以单击表名称,查看和修改建表语句。
- 当选择表建立方式为使用已有表时,请在下拉列表中选择需要的表。
|
④ |
暂不支持同步没有主键的表。但只要选择的表中包括有主键的表,会正常执行流程,没有主键的表会被忽略。 |
- 单击下一步。
- 运行资源设置。
在
运行资源设置页面,配置各项参数。

参数 |
描述 |
同步引擎 |
支持默认内嵌引擎。
|
选择实时任务独享资源组 |
从下拉列表中选择实时任务的独享资源组。
|
实时同步任务名称 |
实时同步任务的名称。 |
选择调度资源组 |
分别选择任务调度和全量离线任务需要使用的独享资源组。目前解决方案仅支持使用独享数据集成资源组,详情请参见独享数据集成资源组。
|
选择全量离线任务独享资源组 |
来源端读取支持最大连接数 |
读取端的最大连接数,即来源端数据库的JDBC连接数。请根据数据库资源的实际情况合理配置。 |
离线任务名称规则 |
全量同步时的离线任务名称。创建解决方案后,会先生成一个离线任务用于读取全量数据,再生成实时任务持续读取实时增量数据。 |
- 单击完成配置,完成数据同步解决方案任务创建。
执行数据同步解决方案任务
在解决方案任务列表页面,单击相应任务后的开始执行,运行创建的数据同步解决方案任务。
查看运行状态及结果
- 在解决方案任务列表页面,单击已运行任务后的执行详情,查看当前解决方案数据同步过程中各子任务节点的运行详情。

- 单击子任务节点后的执行详情,可在弹窗中单击任务链接进入子节点的数据开发页面。
管理数据同步解决方案任务
- 查看或编辑任务。
在
解决方案任务列表页面,单击相应任务后的
任务配置,查看或编辑任务。
说明 仅单击未运行状态后的任务配置,您可以编辑任务。其它状态下的任务配置页面,仅支持查看。
- 删除任务。
单击相应任务后的
删除。在
删除对话框中,单击
确定。
说明 仅删除当前任务的配置记录,已经生成的表和任务不受影响。
在文档使用中是否遇到以下问题
更多建议
匿名提交