本文为您介绍如何基于Dataphin构建SQL类型的离线计算任务。

背景信息

SQL离线计算任务适用于对已有数据进行加工处理生成符合业务场景需求的数据的场景。

操作步骤

  1. 登录Dataphin控制台
  2. 在Dataphin控制台页面,选择工作区地域后,单击进入Dataphin>>
  3. 进入离线计算任务页面。
    1. 在Dataphin首页,单击顶部菜单栏的研发
    2. 在数据开发页面,单击项目名称后的test图标,选择数据开发的项目空间(DevBasic项目)。
      如果您当前访问的是DevBasic项目,且项目空间为您的数据开发空间,则不需要选择项目空间。
    3. 在数据开发页面,单击数据处理
    4. 在左侧导航栏,单击cege图标。
  4. 离线计算任务页面,单击图标后,选择MAX_COMPUTE_SQL
    fagag
  5. 编写并运行代码。
    1. 根据新建文件对话框提示,配置参数。
      faga
      参数 描述
      名称 填写离线计算任务的名称,例如SQL。
      调度类型 选择离线计算任务调度的类型。调度类型包括周期性节点手动节点
      描述 填写对任务的简单描述。
      选择目录 选择离线计算任务的目录。
    2. 完成参数配置后,单击确定
    3. 代码编写页面,编写离线计算任务的SQL代码。
      fafafa
    4. 代码编写完成后,单击页面右上角的执行,运行代码。
  6. 可选:配置调度参数。
    • 如果离线计算任务的调度类型为周期性节点,则需要配置调度参数,详情请参见调度配置
    • 如果离线计算任务的调度类型为手动节点,则无需进行调度配置。
  7. 保存并提交SQL任务。
    1. 在代码编写页面,单击右上角的图标,保存代码。
    2. 在代码编写页面,单击右上角的图标,提交代码。
  8. 可选:发布SQL任务。
    • 如果您的开发模式是Dev-Prod模式,则需要发布SQL任务,详情请参见发布管理
    • 如果您的开发模式是Basic模式,则不需要发布SQL任务,提交后的SQL任务就可以参与生产环境的调度。