在任务高并发执行且无法错峰运行的情况下,需要专有的计算资源来保障任务定时被调度运行,此种场景下建议您选择使用DataWorks的独享调度资源组。本文为您概要介绍独享调度资源组。

使用限制

  • 机器学习节点不支持使用独享调度资源组。
  • 切换任务运行使用的资源组时,如果任务包含了非MaxCompute引擎的节点,需确认其他所有节点和独享调度资源组间网络已经连通。
  • 一笔订单中的独享调度资源仅能在一个独享调度资源组中使用,不可以拆分至多个独享调度资源组。订单支付完成后,可以在该笔订单所购买的资源的基础上,进行资源扩容(增加同规格的资源数)。

适用场景

  • 独享资源组的资源可以随时调配,且可以保障任务产出,推荐生产任务使用。
  • 任务量大,且对任务时效性要求高的场景必须使用独享资源组。
  • 需要访问公网地址、VPC地址的场景,请使用独享资源组。
  • 访问目的端服务、需要配置白名单的场景,请使用独享资源组。
  • 您的VPC与IDC已经连通,且任务需要访问IDC的场景,请使用独享资源组解决网络连通问题。

计费说明

独享调度资源组的计费方式为包年包月,您可以根据自身需求选择合适的规格进行计费,详情请参见独享调度资源组的性能指标和计费标准

网络连通

DataWorks资源组本质上为一组阿里云ECS实例,在进行数据集成、数据开发等任务运行时,需保障资源组与数据源之间的网络是连通的,且不会因为白名单等特殊安全访问设置阻断访问。

  • 网络连通
    • 数据源处于公网环境中:数据源与独享资源组的网络直连即可连通。
    • 数据源处于VPC网络中:
      • 数据源与独享资源组在同一地域:建议独享数据资源组与数据源绑定同一VPC,绑定后系统自动为您添加一条路由至整个VPC的路由,您绑定VPC的任意一个交换机,独享数据资源组与数据源的网络都可连通。
      • 数据源与独享资源组不在同一地域:使用高速通道或VPN将网络连通。
    • 数据源处于IDC网络中:使用高速通道或VPN将网络连通。
    • 数据源处于经典网络中:独享资源组处于阿里云VPC网络,如果数据源处于经典网络环境中,则数据源与独享资源组间网络无法连通,建议您将数据源迁移至VPC网络中。
  • 白名单配置:如果数据源设置有白名单限制访问地址时,您需要将独享数据集成资源组的访问地址添加至数据源的访问白名称中,避免访问受限。详情可参见获取资源组的IP地址与网段:独享数据集成资源组

其他使用指引

  • 扩容说明
    您可以根据业务需求,对每一笔独享调度资源组订单中的资源进行扩容。您仅需支付新增资源数量从当前时间点至原订单的到期时间点之间的差价。
    说明
    • 扩容仅会增加资源数量,不会升级资源CPU与内存配置。
    • 扩容仅支持在当前订单的基础上新增与已购资源相同规格的资源。
    • 执行扩容后,新配置将在升级订单支付后的20分钟内生效。
  • 续费说明

    您可以选择在独享调度资源订单到期前、或到期后的7日内,为该订单内的所有资源统一续费。如果您在到期前未续费,则到期后该订单内的资源将立即停止服务。

  • 到期说明
    • 停服

      默认在距离您所选购的独享调度资源到期前的7天、3天和1天,分别向您的阿里云主账号绑定手机、邮箱等发送到期通知。如果您在到期前未续费,则到期后将立即停止订单内资源的服务。

    • 释放

      独享调度资源到期后,将为您继续保留7天,如果7天内您仍未完成续费,则该实例将被释放。