本章以MySQL到MaxCompute链路为例,为您介绍新增离线数据同步任务,同步RDS数据源中的数据对象到MaxCompute。

前提条件

操作步骤

  1. 登录数据资源平台控制台
  2. 在左上角,单击导航图标图标,选择研发工作台
  3. 可选:在顶部菜单栏,单击资产加工。进入研发工作台时,默认在资产加工页面,若您已在资产加工页面,请跳过该步骤。
  4. 在左侧导航栏,单击数据同步 > 同步数据源 > 数据源管理
  5. 同步工作组数据。
    1. 数据源管理页面,单击同步工作组内数据源
    2. 同步工作组内数据源面板,勾选待同步的数据源,单击确认
    3. 在数据源列表中,单击同步的数据源操作列的查看详情
    4. 单击数据对象页签,单击右上角同步Meta
    5. 同步Meta对话框,选择需要同步的表后,单击确认,等待页面提示同步成功Meta同步
  6. 在左侧导航栏,单击离线数据同步,同步离线数据。
    1. 离线数据同步页面,单击新增任务
    2. 填写基本信息区域,填写基本信息。基本信息
      表 1. 基本信息输入项
      任务名称
      银行客户信息上云
      信用卡信息上云
    3. 选择数据源区域,选择数据源数据对象选择数据源
      选择数据源配置:
      任务名称 数据源类型 数据对象
      银行客户信息上云 MySQL yhkh
      信用卡信息上云 xyk_bkxx
    4. 选择目标端区域,选择目标端数据对象。或者单击数据对象下拉框中的创建目标表,完成数据对象的字段和类型等信息,选择非分区表,单击确认
      目标端配置:
      任务名称 目标端类型 创建目标表英文名 创建目标表中文名
      银行客户信息上云 MaxCompute stg_base_yhkh_di 银行客户信息
      信用卡信息上云 stg_base_xykbkjl_di 信用卡信息
      说明 支持选择已有数据对象,也支持手动创建目标表。
    5. 配置任务调度区域,将任务调度类型选择一次性调度
    6. 配置完成后,单击提交
    7. 周期任务管理列表查看新建的任务,单击任务后的上线,弹出确认上线提示页面,单击确认
    8. 上线成功后,单击任务后的监控,进入离线同步实例页面,等待实例状态运行完成运行完成
  7. 在左侧导航栏,单击数据探查 > 物理表探查,查看物理表数据。
    1. 在左侧导航栏单击数据探查 > 物理表探查 > MaxCompute,选中MaxCompute下的云计算资源。
    2. 单击目标物理表,在数据预览页面查看物理表数据详情。查看物理表详情