文档

配置源库信息

更新时间:

本文介绍配置源库信息的具体方法。

前提条件

  • 当前仅支持在华东1(杭州)、华东2(上海)、华北1(青岛)、华北2(北京)、华北3(张家口)、华南1(深圳)、华南3(广州)和中国香港创建ETL任务。

  • 当前源库支持MySQLPolarDB MySQLOraclePostgreSQLDB2 iSeries(AS/400)DB2 LUWDRDS(PolarDB-X 1.0)、PolarDB PostgreSQLMariaDBPolarDB OracleSQLServerPolarDB-X 2.0

  • 已创建源库。

操作步骤

说明

下文以配置一个MySQL为例进行介绍。

  1. 进入ETL任务的列表页面。

    1. 登录DMS数据管理服务

    2. 在顶部菜单栏中,单击集成与开发(DTS)

    3. 在左侧导航栏,选择数据集成 > 流式ETL

    说明

    您也可以在DTS控制台的ETL页面,单击去DMS创建流式ETL

  2. 单击左上角的新增数据流,在新增数据流对话框中,您需在数据流名称配置ETL任务名称,选择开发方式DAG

  3. 单击确认

  4. 在页面左侧,将输入/维表 MySQL节点拖拽至页面右侧画布的空白区域。

  5. 单击画布区域的输入/维表 MySQL-1,根据页面信息配置源库信息。

    1. 设置以下参数,配置节点信息。

      配置源库信息_节点配置

      参数

      说明

      请输入数据源名称

      DTS会自动生成一个任务名称,建议配置具有业务意义的名称(无唯一性要求),便于后续识别。

      区域

      选择源库所在地域。

      说明

      当前仅支持在华东1(杭州)、华东2(上海)、华北1(青岛)、华北2(北京)、华北3(张家口)、华南1(深圳)、华南3(广州)和中国香港创建ETL任务。

      实例列表

      选择源库所在数据库实例的实例名称。您也可以单击下方的新建实例进行新建,新建方法请参见实例管理

      节点类型

      选择节点类型。

      • 流表

      • 维表

      转换格式

      节点类型选择为流表时,需要选择转换格式。

      • Upsert流

      • Append-Only流

      库表选择

      选择需要转换的库表。

      说明

      当您完成库表的选择时,系统自动进入输出字段页面。

    2. 根据实际需要,在输出字段页签的列名称列,勾选需要的字段。

    3. 可选:如果选择的节点类型为流表,请单击时间属性页签,设置以下参数,完成输入/维表 MySQL-1的配置。

      配置源库信息_时间属性

      参数

      说明

      选择事件时间Watermark字段

      选择数据产生事件时代表时间的字段。

      事件时间Watermark延迟时间

      输入数据产生事件时的延迟时间。

      处理时间ProcTime

      输入事件处理时间的字段。

执行结果

完成配置的源库右侧不显示配置源库信息_感叹号时,说明配置完成。

后续步骤

配置转换组件

  • 本页导读 (1)
文档反馈