DataWorks全新推出Serverless资源组,它涵盖原独享调度资源组、独享数据集成资源组、独享数据服务资源组的核心功能。现在,您只需这一个资源组,即可统一运行数据同步、周期性任务和API服务等所有核心操作,极大简化资源管理。
当使用Serverless资源组时,只要节点任务发布至生产环境进行周期性调度,均会产生额外的任务调度计费。
计费场景
DataWorks的资源费用包括资源占用费用和任务调度费用。其中:
注意事项
Serverless资源组按量计费方式,高峰期可能存在抢占资源情况,无法完全保障资源使用的时效性。
按量付费Serverless资源组可转为包年包月资源组,但包年包月资源组不支持转换为按量付费资源组。
新用户开通DataWorks时会默认购买按量付费Serverless资源组。不使用不计费,计费详情请参见按量付费资源组计费。
性能指标及购买建议
Serverless资源组的包年包月和按量付费购买方式均基于CU量进行计费,1CU = 1核CPU + 4GiB内存
。使用Serverless资源组时,需要根据实际开发场景和对应的任务类型来规划资源组规格。
以下建议规格是基于一般情况提供的指导性配置。您可根据自身的具体业务需求和实际情况对资源进行调整,以确保任务能够高效且稳定地运行。
数据集成
离线同步
离线同步任务并发配置 | 建议规格 | 运行最低规格 |
<4 | 0.5 CU | 0.5 CU |
>=4 |
|
实时同步
同步任务类型 | 建议规格 | 运行最低规格 | |
MySQL实时同步 | 数据库数1 | 2.5 CU | 运行一个实时同步任务最低规则:1 CU |
数据库数2~5 | 4 CU | ||
数据库数6以上 | 7 CU | ||
DRDS(PolarDB-X 1.0)实时同步 | 7 CU | ||
kafka实时同步 | 2.5 CU | ||
其它类型单表级别实时任务 | 2.5 CU | ||
整库实时同步 | - | 运行一个整库同步任务最低规则:2 CU |
数据计算
DataWorks支持的各类型节点任务(例如,PyODPS、EMR Hive),一部分会通过调度下发至各引擎执行(由对应计算引擎收取数据计算费用),另一部分直接在DataWorks的资源组上执行或通过DataWorks资源组启动资源再下发至引擎执行,会占用DataWorks资源组的计算资源,由DataWorks收取数据计算费用。
使用Serverless资源组运行数据计算任务会消耗CU,计算型任务列表及运行计算型任务的默认CU和运行CU详情,请参见计算型任务列表。
任务调度
如果您的调度任务中包含计算任务(PyODPS2、EMR Hive等任务):计算任务将使用Serverless资源组进行计算,请根据任务实际情况合理规划资源组CU规格。各计算任务的默认CU量,请参见:数据计算任务列表。
如果您的调度任务中不包含计算任务:Serverless资源组支持的最大并发运行实例数上限为200,已满足旧版资源组所有规格的最大并发运行实例数,无需关注Serverless资源组CU规格。
数据服务
最大每秒请求(QPS) | 最低规格 | 服务可用性(SLA) |
500 | 4 CU | 99.95% |
1000 | 8 CU | |
2000 | 16 CU |
包年包月 VS 按量付费
Serverless资源组根据计费方式分为预付费的资源组(包年包月)和后付费的资源组(按量付费)。
Serverless资源组(包年包月):您需提前预估所需CU量及使用时长,并支付相应费用。除支付的包年包月费用外,使用Serverless资源组在DataWorks进行数据同步、数据计算,以及调试/调用数据服务API,DataWorks侧将不再收取其他资源占用费用。
Serverless资源组(按量付费):您可先使用产品相关功能,后续根据使用的CU总量统一支付相应费用。使用按量付费Serverless资源组运行部分任务(例如,离线同步任务、数据服务任务、数据开发任务)会产生相应资源占用费用。
任务调度费用单独计算,不包含在上述计费中。
不同计费方式的功能对比如下:
对比项 | Serverless资源组(按量付费) | Serverless资源组(包年包月) |
资源组总共可用的CU量 | 按照实际使用量计算。 | 购买时指定的CU量。 |
扩容、缩容、续费 | 不涉及 | 支持 |
配额管理 | 用于控制不同场景可使用的CU上限。数据计算、数据集成、数据服务均支持。 | |
设置任务调度并发上限 | 支持,最大支持200个任务实例并发执行。 | |
绑定的专有网络个数 |
| 取决于购买的CU量。
|
计费标准
包年包月资源组计费
统一按CU使用量收费,费用 = 月单价 * 月数 * 每月购买的CU量
。
地域 | 月单价(元/月/CU) |
华北3(张家口) | 180.3046 |
华北6(乌兰察布) | 214.5624 |
华东2(上海)、华东1(杭州)、华北2(北京)、华南1(深圳) | 240 |
英国(伦敦) | 329.5431 |
美国(弗吉尼亚) | 348.3241 |
马来西亚(吉隆坡) | 409.3401 |
中国香港、新加坡、德国(法兰克福)、印度尼西亚(雅加达) | 436.7817 |
美国(硅谷) | 469.9517 |
日本(东京) | 500.3647 |
按量付费资源组计费
统一按照CU时 * CU单价计费,费用 = CU时 * CU单价
,按小时出账。
在资源组配额管理中,如果为数据服务当前配置了1CU,则无论数据服务功能是否被使用,CU的消耗将持续,直至将数据服务当前配额的占用CU调整为0后才会停止。
地域 | 单价(CNY/CU时) | 示例 |
华北3(张家口) | 0.375635 | 示例:上海地域某数据同步任务配置了2CU,且该任务在0.5小时后运行成功,上海地域CU的单价为0.5元/CU时,则该任务消耗的CU时及费用如下:
|
华北6(乌兰察布) | 0.447005 | |
华东2(上海)、华东1(杭州)、华北2(北京)、华南1(深圳) | 0.5 | |
英国(伦敦) | 0.686548 | |
美国(弗吉尼亚) | 0.725675 | |
马来西亚(吉隆坡) | 0.852792 | |
德国(法兰克福)、印度尼西亚(雅加达)、中国香港、新加坡 | 0.909962 | |
美国(硅谷) | 0.979066 | |
日本(东京) | 1.042426 |
查看账单详情
在费用与成本控制台查看账单详情时,Serverless资源组的计费项和计费Code如下:
按量付费:计费项为
通用资源组CU时(按量付费)
、计费Code为exresource_cu_hour_post
。包年包月:计费项为
通用独享资源组包年包月(混合计费)
、计费Code为cu_number
。
具体操作请参见查看账单详情。
到期说明及续费
若Serverless包年包月资源组即将到期,您可对资源组进行续费。如果未续费,则资源组将会被停服或释放。续费详情,请参见到期说明及续费操作。
资源组扩缩容费用说明
Serverless包年包月资源组支持在购买后根据实际需要进行扩缩容,扩缩容涉及费用变更,扩缩容前后费用计算逻辑,请参见升配事项介绍。
后续步骤
您可购买资源组并选择在数据集成、数据开发、数据服务等任务中使用。购买资源组、绑定资源组至工作空间、连通资源组网络的相关操作,请参见新增和使用Serverless资源组。