创建MySQL to MaxCompute离线同步周期任务

通过选择已注册的数据源端数据和目标端,实现全量任务自动建表的方式创建离线同步周期任务,本文介绍如何创建MySQL to MaxCompute离线同步周期任务。

前提条件

  1. 已新建工作组“信息中心(xxzx)”,具体操作,请参见新建工作组

  2. 已在工作组中分别添加数据源类型为MaxCompute、RDS MySQL的数据源,具体操作,请参见新建云计算资源

  3. 已获取数据源的物理表,具体操作,请参见获取物理表

操作步骤

  1. 登录数据资源平台控制台

  2. 在页面左上角,选择菜单 > 协同

  3. 在顶部菜单栏,单击选择工作组图标,选择目标工作组。

  4. 在左侧导航栏,单击数据同步图标,将鼠标悬停在离线数据同步上,单击image图标。

  5. 离线数据同步页面,单击新增任务

  6. 离线数据同步管理页面,配置离线同步周期任务。

    1. 填写基本信息,任务名称“信用卡客户数据上云_d”。

    2. 源端配置区域,选择数据源为“MySQL/dataq_dws_rds”,数据表选择为“ys_yhkh(未上云)”。

    3. 源端配置区域,选择目标端“MaxCompute/dataq_odps_dev”,单击数据表下拉框,选中目标表为“stg_base_yhkh_demo_di”。

    4. 字段映射区域默认选择同名映射

    5. 配置完成后,在离线数据同步管理页面左上角,单击image.png图标。

  7. 重复步骤6,创建以下数据源离线周期任务。

周期任务名称

数据源

数据源数据对象

目标端

目标端数据对象

信用卡办卡信息上云_d

MySQL/dataq_dws_rds

ys_xyk_bkxx

MaxCompute/dataq_odps_dev

stg_base_xykbkjl_demo_di

信用卡消费明细上云_d

MySQL/dataq_dws_rds

ys_xyk_xfmx

MaxCompute/dataq_odps_dev

stg_base_xykxfmx_demo_di

预期结果

刷新离线数据同步页面,周期任务管理列表中展示新建的周期任务。