本文介绍如何创建开发环境场景并运行。
前提条件
步骤一:新建开发环境场景
登录数据资源平台控制台。
在页面左上角,单击图标,选择协同。
在顶部菜单栏,单击图标,选择目标工作组,单击资产加工。
说明若您已在资产加工页面,请跳过“单击资产加工”的操作。
在左侧导航栏,单击图标,选择场景模式。
单击场景模式右侧的图标,在开发环境页签,单击新建场景。
在新建场景对话框,填写场景名称为“信息中心”,场景标识为“xxzx,单击确认。
步骤二:编排开发环境场景
添加公共节点,把左侧公共节点区域下已新建的公共节点全部拖入到画布。
包括节点:
层级
表名
ODS层
ods_base_xykbkjl_demo_di
ods_base_xykxfmx_demo_di
ods_base_yhkh_demo_di
DWD层
dwd_xykyw_bkjl_demo_di
dwd_xykyw_xfmx_demo_di
dwd_khzx_khxx_demo_di
DWS层
dws_ren_kh_demo_di
dws_wp_xyk_demo_di
dws_sj_xykxfhz_demo_di
dws_sj_xykyzd_demo_di
将公共节点进行连线。
按照层级下的数据表进行连线,连线过程中设置上下游节点连接详情,保证输出code-数据类型和输入code-数据类型一致。
说明在搭建节点流程的过程中,如果上游节点和下游节点需要连线(即上游节点的输出数据要作为下游节点的输入数据),则要求上游节点的输出数据与下游节点的输入数据的数据格式和云计算资源类型必须一致。
单击场景画布上已添加的公共节点,进行配置。
单击页面右侧的节点属性页签,选择引用公共节点版本,依次将各个节点的引用公共节点版本选择刚才发布的“1.0.0”。
单击页面右侧运行配置页签,选择各个公共节点的开发计算引擎为“data_odps_dev”。
添加数据同步节点进行配置。
在左侧节点列表中,选择系统节点 > 同步节点,将同步节点拖到画布上,输入节点名称为“从MaxCompute同步到RDS MySQL”。
单击拖入同步节点1,在右侧的运行配置中,配置节点输入和输出。
节点
参数
配置信息
节点输入
云计算资源类型
MaxCompute
输入结构
dws_sj_xykxfhz_demo_di
节点输出
云计算资源类型
ApsaraDB for RDS
输出结构
dws_sj_xykxfhz_demo_di
开发环境物理表所在资源
dataq_dws_rds_dev
生产环境物理表所在资源
dataq_dws_rds_prod
将dws层公共节点和对应的同步节点进行连线。
步骤三:运行开发环境场景
单击图标,保存画布后,单击图标,进行离线节点运行。
说明如果场景运行失败,您可将鼠标指针指向状态后并单击后面的查看日志,通过运行日志定位失败原因。
在弹出设置业务日期,单击确定,等待运行成功。
预期结果
开发环境场景运行成功。