DataWorks支持实时同步数据,本文为您介绍如何新建、发布和运维实时同步节点。

前提条件

目前实时同步处于灰度阶段,如果您需要使用相关功能,请提交工单进行开通。

新建实时同步节点

  1. 登录DataWorks控制台
  2. 在左侧导航栏,单击工作空间列表
  3. 选择工作空间所在地域后,单击相应工作空间后的进入数据开发
  4. 鼠标悬停至新建图标,单击数据集成 > 实时同步
    您也可以找到相应的业务流程,右键单击数据集成,选择新建 > 实时同步
  5. 新建节点对话框,输入节点名称,并选择目标文件夹
    说明 节点名称必须是大小写字母、中文、数字、下划线(_)以及小数点(.),且不能超过128个字符。
  6. 单击提交

提交实时同步节点

  1. 打开实时同步节点的编辑页面。
    实时同步
    序号 描述
    1 组件区域,包括输入输出转换三大模块。
    2 节点的图形化编辑区域,您可以拖拽组件至该区域进行编辑。
    3 属性配置区域,单击组件或右侧的基本配置时,会显示相应的属性配置面板。
  2. 根据自身需求,从组件区域拖拽相应的组件至节点的编辑区域,并通过连线完成相应的节点关系连接,数据会根据连线从上游同步至下游。
    下图为您展示新建MySQL数据实时同步至MaxCompute的过程。实时同步
  3. 单击相应的节点,在右侧的对话框进行节点配置。各类型的节点配置详情请参见实时同步
    节点配置
  4. 配置完成后,单击工具栏中的提交图标。
  5. 提交对话框,选中需要提交的节点和忽略输入输出不一致的告警,输入备注
  6. 单击提交
    如果您使用的是标准模式的工作空间,提交成功后,请单击右上角的发布。具体操作请参见发布管理

运维实时同步节点

  1. 提交或发布节点成功后,单击右上角的运维
  2. 运维中心的左侧导航栏,单击实时任务运维 > 实时同步任务
  3. 您可以在实时同步任务页面,单击相应的任务名称,查看详细的运维信息。并可以进行启动停止重置位点等操作。
    实时同步运维
    操作 描述
    启动 启动非运行状态的任务。
    停止 停止运行中的任务。
    重置位点 设置下次启动的时间位点。