开通DataWorks时,阿里云DataWorks自动为用户提供公共资源组(公共调度资源组),供用户共享使用。如果您使用时发现公共资源组无法满足业务需求,您可购买公共资源包或独享资源组。本文为您介绍公共资源组与公共资源包的概要信息。

使用限制

  • 公共资源组在DataWorks公共集群下,所有阿里云DataWorks用户共享使用该集群资源,公共资源使用高峰期可能会出现不同用户间抢占资源的情况,无法保证任务及时调度执行。
  • 公共资源组的最大调度资源有固定大小。用户所有工作空间下的任务共享使用,当多个任务在同一时间运行时,可能会出现各工作空间抢占资源的情况,无法保证任务及时调度执行。
  • 如果您希望保障任务运行资源独立且充足,建议您开通使用独享资源组(独享数据集成资源组、独享数据服务资源组和独享调度资源组),或单独购买公共资源包(公共调度资源包)。

适用场景

公共资源组是在用户开通DataWorks时默认创建的,您可以使用公共资源组进行数据开发、运行测试等操作。

公共资源组建议在任务量相对较少、对任务时效性要求不高的场景下使用。

计费说明

根据公共资源组实例费用、同步进程费用等计费项收费。公共资源组开通时支持按量付费的计费模式,您也可以单独购买包年包月的公共资源包,包括公共调度资源组资源包。计费详情可参见:

网络连接方案

DataWorks资源组本质上为一组阿里云ECS实例,在进行数据集成、数据开发等任务运行时,需保障资源组与数据源之间的网络是连通的,且不会因为白名单等特殊安全访问设置阻断访问。

  • 网络连通
    • 公共调度资源组:
      支持阿里云内部数据源之间的访问连通,数据源处于以下网络环境时,不支持使用:
      • 数据源处于公网环境中,且数据源有白名单设置,限制了未知IP的访问。
      • 数据源处于阿里云VPC网络环境中。
      说明 需要访问公网的任务建议使用独享资源组。
    • 公共数据服务资源组:

      支持与公网、经典网络下各类型数据源的连通。数据源处于VPC网络环境时,不支持使用。

  • 白名单设置

    公共调度资源组和公共调度资源包为您提供任务安全沙箱功能,限制未知IP访问资源组。如果您的业务场景涉及访问资源组,您需要将访问资源组的IP添加至安全沙箱白名单中。详细操作可参见安全设置