在PAI完成模型开发后,您可以购买并创建MaxCompute资源配额,然后提交任务至MaxCompute进行大规模分布式训练。本文介绍用于PAI模型训练的MaxCompute资源的要求和配置要点。
MaxCompute资源
MaxCompute是适用于数据分析场景的企业级SaaS(Software as a Service)模式云数据仓库,采用Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化运维投入,使您可以经济高效地分析处理海量数据。有关MaxCompute资源的详细介绍,请参见MaxCompute资源概述。
MaxCompute资源类型与对比选择
在PAI产品中支持使用的MaxCompute资源为CPU资源,和在MaxCompute产品中使用一样,支持以下两种付费方式:
按量付费标准版(推荐使用)
包年包月标准计算资源
当使用按量付费时,支持使用抵扣包:
计算抵扣包
存储抵扣包
各类型的主要区别如下。
MaxCompute计费项包含计算资源、存储资源、上传/下载资源费用三部分。PAI训练任务通常不涉及上传/下载资源。
按量计费时,在计算资源费用中,算法任务的账单在PAI,其他任务(如SQL类任务)账单在MaxCompute。
对比项 | 按量付费标准版(推荐使用) | 包年包月标准计算资源 | 计算抵扣包 | 存储抵扣包 |
对比项 | 按量付费标准版(推荐使用) | 包年包月标准计算资源 | 计算抵扣包 | 存储抵扣包 |
计算资源 (用于任务训练计算) | 资源池为共享型,计算作业按需抢占资源,不可指定用量。 | 包含预留计算资源(独享资源)和非预留计算资源(非必选资源)。 | 计算资源用量抵扣包。 | 无 |
存储资源 (用于存储训练结果表) | 资源池为共享型,按需存储,无使用限制。 | 资源池为共享型,按需存储,无使用限制。 | 无 | 存储资源用量抵扣包。 |
计费规则-计算资源 | ||||
计费规则-存储资源 | 无 | |||
适用场景 | 作业量不稳定且需要灵活存储空间的项目。 | 已上线、可平稳运行的项目。 | 抵扣按量付费产生的计算用量。 | 抵扣标准存储和备份存储按量计费项的用量。 |
操作账号和权限要求
开通购买MaxCompute资源
您可前往MaxCompute通用购买页面,根据需要开通购买对应的MaxCompute资源。
使用与管理MaxCompute资源
已开通的MaxCompute资源可关联到某个工作空间中,便于任务使用。您也可以在MaxCompute的资源管理页面进一步规划管理。
绑定工作空间
新建工作空间时,可以选择关联MaxCompute资源,编辑待创建的MaxCompute项目名称,详情请参见创建及管理工作空间。此后,工作空间内创建的训练任务将使用关联的MaxCompute资源。
您也可以在工作空间创建完成后,修改关联的MaxCompute资源。具体操作,请参见管理工作空间-计算资源配置。
管理MaxCompute资源
登录PAI控制台,在 页面查看当前地域可用的MaxCompute资源概况。
查看当前MaxCompute资源的计算资源CU的配额情况,以及资源类型是预付费(包年包月类型)还是后付费(按量付费类型)。
您可以选择使用按量付费Quota,也可以选择包年包月Quota,包年包月Quota支持通过控制CU量来控制预算,而按量付费Quota不可自行控制CU量。单击资源管理进入MaxCompute页面,对预付费(包年包月类型)的资源进行进一步的配额规划设置,操作详情请参见计算资源-Quota管理。
- 本页导读 (1)
- MaxCompute资源
- MaxCompute资源类型与对比选择
- 操作账号和权限要求
- 开通购买MaxCompute资源
- 使用与管理MaxCompute资源