DataWorks为您提供独享资源组模式,支持购买独享的机器资源组,来分配给工作空间中运行的任务。本文为您介绍如何购买、新增、查看、操作和使用独享资源组。

背景信息

独享资源组模式下,机器的物理资源(网络、磁盘、CPU和内存等)完全独享。独享资源组模式的作用如下:
  • 支持隔离不同用户间的资源使用。
  • 支持隔离不同工作空间任务的资源使用。
  • 支持扩容、缩容功能,可以满足资源独享、灵活配置等需求。
独享资源组可以访问同一地域的VPC数据源和跨地域的公网RDS地址。
说明 每天0点~9点是DataWorks所有租户的任务高峰期,如果您在该时间段使用的是公共资源组,则资源会被租户共享。

由于资源被租户共享,可能出现抢占资源的情况。如果您对任务的产出时间要求较高,请使用独享资源组进行操作。独享资源组不收取实例和版本费用。

购买独享资源组

DataWorks独享资源组采用包年包月的方式购买,您可以通过产品详情页创建独享资源组两个入口进行购买:
  • 产品详情页入口

    进入DataWorks产品页面,单击独享资源组,即可跳转至购买页面。

  • 新增独享资源组入口
    1. 登录DataWorks控制台
    2. 在左侧导航栏,单击资源组列表,默认进入独享资源组页签。
    3. 如果您在该地域未购买过独享资源组,单击创建独享资源组
    4. 创建独享资源组对话框中,单击订单号后的购买,进入购买页面。购买

进入购买页面后,请根据实际需要,选择相应的地域独享资源类型独享调度资源资源数量计费周期,单击立即购买

说明 独享资源组不支持跨地域使用。例如,华东2(上海)地域的独享资源组,只能给华东2(上海)地域的工作空间使用。

创建独享资源组

  1. 资源组列表 > 独享资源组页面,单击创建独享资源组
  2. 创建独享资源组对话框中,配置各项参数。
    参数 描述
    资源组类型 资源的使用类型。独享资源组包括独享调度资源组独享数据集成资源组两种类型,分别适用于通用任务调度和数据同步任务专用。
    资源组名称 资源组的名称,租户内唯一,请避免重复。
    说明 租户即主账号,一个租户(主账号)下可以有多个用户(子账号)。
    资源组备注 对资源组进行简单描述。
    订单号 此处选择购买的独享资源组订单。如果没有购买,请单击购买
  3. 配置完成后,单击确定
    说明 独享资源组在20分钟内完成环境初始化,请耐心等待其状态更新为运行中

查看独享资源组

完成独享资源组的创建后,您可以在独享资源组列表中查看到期时间资源数资源使用率等基本信息:
  • 到期时间:到期时间与独享资源组购买订单中选定的时间相关联,即独享资源组的有效期:
    • 您可以在到期前进行续费。如果到期后未续费,状态会变为过期,独享资源租不能被新任务使用。
    • 您可以在7天内激活已过期的独享资源组。如果超过7天仍未激活,独享资源组会被释放。
  • 数量:表示购买的资源个数。
  • 使用率:资源的使用情况(负载),用百分比表示。详情请参见查看独享资源组的使用率

操作独享资源组

完成独享资源组的创建后,您可以在独享资源列表中进行扩容缩容续费专有网络绑定修改归属工作空间等操作:
  • 扩容

    如果独享资源组使用率过高,不能满足实际需求,请单击相应资源后的扩容,增加资源数量。

  • 缩容

    当资源出现闲置不使用的情况,请单击相应资源后的缩容,调小资源数量。

  • 续费

    单击相应资源后的续费,即可延长该独享资源组的到期时间。

  • 专有网络绑定
    独享资源组部署在DataWorks托管的专有网络(VPC)中,如果需要与您自己的专有网络连通,需要进行专有网络绑定操作。
    1. 单击相应资源后的专有网络绑定,即可进入绑定页面。
      绑定前,请首先进行RAM授权,让DataWorks拥有访问您的云资源的权限。无权限授权
    2. 授权完成后,单击新增绑定
    3. 新增专有网络绑定对话框中,配置各项参数。新增绑定
      注意 独享资源组的可用区必须选择要访问数据源的可用区,绑定专有网络时,选择访问数据源所绑定的交换机。

      获取独享资源组EIP、独享资源组绑定的专有网络IP及数据源的网络环境的方式,请参见独享资源组常见问题

      如果独享资源组和数据源绑定了同一个专有网络,但是在不同的可用区,请在绑定专有网络处添加自定义路由。详情请参见添加路由

    绑定成功后,如果信息发生变化,请单击相应资源后的解除绑定,并重新进行绑定。

  • 修改归属工作空间

    独享资源组需要绑定归属的工作空间,才可以被任务真正使用。一个独享资源组可以分配给多个工作空间使用。

使用独享资源组

独享资源组绑定至工作空间后,您可以在工作空间中,分配任务至特定的独享资源组上使用。

独享资源组包括独享调度资源组独享数据集成资源组
  • 独享调度资源组
    1. 登录DataWorks控制台
    2. 在左侧导航栏,单击工作空间列表
    3. 单击相应工作空间后的进入数据开发
    4. 修改相应任务的调度资源组。
      您可以通过运维中心调度配置两种方式修改调度资源组:
      • 通过运维中心页面修改调度资源组:
        1. 单击左上角的图标图标,选择全部产品 > 任务运维 > 运维中心(工作流),进入运维中心页面,并切换至修改的归属工作空间。
        2. 在左侧导航栏,单击周期任务运维 > 周期任务
        3. 单击页面中间的箭头展开任务列表后,单击相应周期任务后的更多 > 修改资源组修改资源组
          注意 虚节点、业务流程、机器学习等任务类型不支持修改资源组,请勿选择。
          如果您需要批量修改资源组,请在周期任务页面,选中需要修改的周期任务,单击页面下方的修改资源组批量修改资源组
        4. 批量修改资源组对话框中,选择相应的调度资源组,单击确定
      • 通过调度配置页面修改调度资源组:
        1. 单击左上角的图标图标,选择全部产品 > 数据开发 > DataStudio(数据开发),并切换至修改的归属工作空间。
        2. 数据开发面板,双击打开相应节点的编辑页面。
        3. 单击右侧的调度配置,在资源属性区域选择任务调度运行时需要使用的资源组。详情请参见配置资源属性资源组
        您可以在节点的编辑页面,单击运行图标。在参数对话框中,设置数据开发界面测试运行使用的调度资源组,单击确定修改参数
  • 独享数据集成资源组
    独享数据集成资源组创建成功后,您需要在配置数据集成任务时修改任务运行资源。
    说明
    • 如果已经连通本地IDC和阿里云专有网络,您可以使用数据集成资源组同步任务。请购买独享数据集成资源组后,提交工单进行处理,详情请参见独享数据集成资源
    • 独享数据集成资源组不支持跨区域的VPC数据库同步。
    • 如果需要在独享数据集成资源组上进行添加路由等操作,请提交工单进行申请。
    • 使用数据集成独享资源组时,请保证数据源自身所在机器可以被该资源组绑定的VPC访问。如果有安全拦截,请对相应的白名单放行,即在数据源侧的白名单添加该资源组绑定的VPC网段。
    1. 资源组列表 > 独享资源组页面,单击相应资源后的修改归属工作空间,绑定独享数据集成资源组归属的工作空间。
    2. 在数据集成任务的编辑页面,通过调度运行及界面测试,选择运行时执行数据集成离线同步任务的资源组:
      1. 单击左上角的图标图标,选择全部产品 > 数据开发 > DataStudio(数据开发),并切换至修改的归属工作空间。
      2. 数据开发面板,双击打开相应节点的编辑页面。
      3. 单击右侧的数据集成资源组配置
      4. 数据集成资源组配置对话框中,选择相应的方案资源组修改资源组
      5. 在节点的编辑页面,单击工具栏中的保存图标。