在数据集成任务高并发执行且无法错峰运行的情况下,企业需要独享的计算资源来保障数据快速、稳定地传输,此时您可以选择独享数据集成资源。

使用限制

  • 独享数据集成资源和独享调度资源绑定VPC时,请选择需要访问的数据源所绑定的交换机。
  • 独享数据集成资源无法访问阿里云经典网络。如果您的数据源是经典网络,建议使用公共资源组进行同步任务运行。
  • 如果数据源和独享资源在同VPC、同可用区、同交换机的情况下,仍然网络不通,您需要添加独享资源组EIP地址、独享资源组绑定的专有网络(或交换机)网段至数据库的白名单和安全组内。详情请参见添加独享数据集成资源组的白名单
说明 获取独享资源组EIP、独享资源组绑定的专有网络IP及数据源的网络环境的方式,请参见独享资源组常见问题

独享资源组的特点

  • 在您的任务没有把相应的独享资源组占满的前提下,可以保证您的任务及时得到响应。
  • 具备连通您的VPC、IDC的能力。
  • 与公共资源组相比,支持更多类型的数据源。
  • 可以被多个DataWorks工作空间共享,实现资源的复用。

购买独享数据集成资源

  1. 登录DataWorks控制台
  2. 在左侧导航栏,单击资源组列表,进入独享资源组页面。
  3. 单击新增独享资源组
  4. 新增独享资源组对话框中,单击订单号后的购买,跳转至购买页面。
  5. 进入购买页面后,请根据实际需要,选择相应的地域独享资源类型独享调度资源资源数量计费周期,单击立即购买
    说明 此处的独享资源类型选择独享数据集成资源

    独享资源不支持跨地域使用,即华东2(上海)地域的独享资源,只能给华东2(上海)地域的工作空间使用。

  6. 确认订单信息无误后,勾选《DataWorks独享资源(包年包月)服务协议》,单击去支付

新增独享数据集成资源

  1. 资源组列表 > 独享资源组页面,单击新增独享资源组
  2. 新增独享资源组对话框中,配置各项参数。
    参数 描述
    资源类型 资源的使用类型。独享资源包括独享调度资源独享数据集成资源两种类型,分别适用于通用任务调度和数据同步任务专用。
    资源名称 资源的名称,租户内唯一,请避免重复。
    说明 租户即主账号,一个租户(主账号)下可以有多个用户(子账号)。
    资源备注 对资源进行简单描述。
    订单号 此处选择购买的独享资源订单。如果没有购买,请单击购买,跳转至售卖页进行购买。
    可用区 单个地域提供了不同机器的可用区,请选择数据源所在的可用区。
  3. 配置完成后,单击创建
    说明 独享资源在20分钟内完成环境初始化,请耐心等待其状态更新为运行中

    使用独享数据集成资源进行数据迁移的具体操作请参见迁移ECS自建MySQL数据库至MaxCompute

绑定专有网络

独享资源部署在DataWorks托管的专有网络(VPC)中,如果需要与您自己的专有网络连通,请进行专有网络绑定操作:

  1. 单击相应资源后的专有网络绑定
    说明 绑定专有网络前,您需要进行RAM授权,让DataWorks拥有访问云资源的权限。
  2. 单击右上角的新增绑定,在新增专有网络绑定对话框中,配置各项参数。
    参数说明如下:
    • 请绑定数据源所在的专有网络。如果没有可用的专有网络,请单击创建专有网络,跳转至专有网络控制台中的专有网络页面进行新建。

      单击创建专有网络,在创建专有网络对话框中,配置各项参数,单击确定

      创建完成后,即可跳转至专有网络列表页面进行查看。

    • 请选择与数据源同一个交换机。如果没有可用的交换机,请单击创建交换机,跳转至专有网络控制台中的交换机页面进行新建。

      单击创建交换机,在创建交换机对话框中,配置各项参数,单击确定

      创建完成后,即可跳转至交换机列表页面进行查看。

    • 如果没有可用的安全组,请单击创建安全组,跳转至ECS控制台中的安全组列表页面进行新建。

      单击创建安全组,在创建安全组对话框中,配置各项参数,单击确定

      创建完成后,即可跳转至安全组列表页面进行查看。

  3. 单击创建

修改归属工作空间

独享资源需要绑定归属的工作空间,才可以被任务真正使用。一个独享资源可以分配给多个工作空间使用:

  1. 返回DataWorks控制台,在左侧导航栏,单击资源组列表
  2. 单击相应资源后的修改归属工作空间
  3. 修改归属对话框中,选择需要的工作空间,单击确定
    绑定工作空间后,数据同步任务可以通过数据集成资源组配置使用独享数据集成资源组:
    1. 单击左上角的图标图标,选择全部产品 > 数据开发,并切换至修改的归属工作空间。
    2. 数据开发面板,双击打开相应节点的编辑页面。
    3. 单击右侧的数据集成资源组配置
    4. 数据集成资源组配置对话框中,选择相应的方案资源组
      修改资源组
    5. 在节点的编辑页面,单击工具栏中的保存图标。