数据传输服务-Quota管理

MaxComputeQuota管理列表可以查看数据传输服务Quota,并通过Quota配置来设置数据传输服务Quota的并发数。

背景信息

独享数据传输服务(包年包月)资源组是MaxCompute为满足部分客户数据传输的需求推出的独享资源组,保障数据传输资源的独享性,并提高数据传输的稳定性。

更多信息可以参见购买与使用独享数据传输服务资源组数据传输独享资源费用(包年包月)

区域限制

目前支持地域如下:

地域名称

地域ID

华南1(深圳)

cn-shenzhen

华东2(上海)

cn-shanghai

华北2(北京)

cn-beijing

华东1(杭州)

cn-hangzhou

中国香港

cn-hongkong

新加坡

ap-southeast-1

印度尼西亚(雅加达)

ap-southeast-5

美国(弗吉尼亚)

us-east-1

配置Quota

已经购买的数据传输服务Quota可以进行二次拆分,默认阿里云账号具有Quota配置权限,RAM账号可以通过授权获得配置权限,详情请参见RAM权限。配置Quota主要由基础配置伸缩配置两部分组成。

基础配置

Quota基础配置即对数据传输服务类型二级Quota做如下配置:

说明

每个一级Quota下最多支持20个二级Quota,请根据业务场景合理规划和配置。

  • 新增、删除付费方式

  • 预留并发数:若没有分时伸缩场景需求,通过此配置二级Quota的预留并发数即可满足Quota的日常管理需求。

  • 弹性预留并发数配置(仅作用于当前生效的配置方案)。配置弹性预留并发数会产生额外费用,若没有分时伸缩场景需求,请不要配置弹性预留并发数。

伸缩配置

Quota伸缩配置即分时伸缩配置,实现为Quota在不同时段设置不同的预留并发数和弹性预留并发数。

配置流程

  1. 登录MaxCompute控制台,在左上角选择地域。

  2. 在左侧导航栏,选择管理配置 > 配额(Quota)管理 。

  3. Quota管理页面,单击目标Quota对应操作列的Quota配置

    仅支持付费方式包年包月Quota。

  4. Quota基础配置

    1. Quota配置页面,选择基础配置页签,单击编辑基础配置

    2. 单击新增二级Quota或为现有的二级Quota配置预留并发数弹性预留并发数

      参数说明如下:

      参数

      说明

      Quota名称

      • 自定义输入,需以字母开头,包含字母、数字和下划线。

      • SDKConnector中指定某个二级Quota时,QuotaName需要填写控制台Quota管理列表中系统生成的名称,格式为“ot_42854300324****_169821756****_p#ot_42854300324****_169821756****”

      预留并发数

      包月预留并发数。

      • 一级Quota的预留并发数即为预付费购买的总并发数。需要增加、减少并发数只能通过升配、降配方式实现,在此不可编辑。

      • 二级Quota的预留并发数规定如下:

        • 所有二级Quota预留并发数总和等于一级Quota的预留并发数。

        • 默认二级Quota的预留并发数不可编辑,由一级Quota预留并发数减去自定义二级Quota的预留并发数之和计算所得。

      弹性预留并发数

      包月弹性预留并发数。

      • 一级Quota的弹性预留并发数需要小于或等于该一级Quota的预留并发数,默认为0。

      • 二级Quota的弹性预留并发数规定如下:

        • 所有二级Quota弹性预留并发数总和为一级Quota的弹性预留并发数。

        • 默认二级Quota的弹性预留并发数不可编辑,由一级Quota弹性预留并发数减去自定义二级Quota的弹性预留并发数之和计算所得。

    3. 删除Quota

      Quota配置页面,选择基础配置页签,单击目标Quota对应操作列的删除

      二级Quota被删除后,此二级Quota将在所有的Quota资源配置方案里被删除,对应的预留并发数弹性预留并发数将加到默认二级Quota中,如需要调整请编辑更新伸缩配置页签中的各个配置方案。

  5. Quota伸缩配置

    购买包年包月MaxCompute项目后,每个一级Quota都会有一个名称为Default的默认资源配置方案

    每个资源配置方案包含一级Quota及其下所有二级Quota的预留并发数和弹性预留并发数配置,多个配置方案结合分时管理,常用于一天内不同时段有不同配置的场景。例如,在每天00:00~08:0008:00~24:00两个时段,二级QuotaCU量需求不同,则可以配置两个Quota配置方案,通过分时管理进行调度。

    说明
    • 一个Quota资源组最多支持48个分时区间,单个分时区间的最短时长为30分钟。

    • 当前数据传输服务进行分时配置后,如果需要对数据传输服务(包年包月)做降配操作,请先调低分时并发数。

    • 分时配置生效时间为0~5分钟,且计费会按照实际生效时间开始计算。

    1. Quota配置页面,选择伸缩配置页签。

    2. 伸缩配置页签,单击新增配置方案,在弹出的新增配置方案对话框,填写配置方案名称,并为二级Quota配置预留并发数弹性预留并发数

    3. 单击确定,完成新增。

    4. 伸缩配置页签,单击目标配置方案对应的操作列的立即生效,可使该配置方案立即生效。也可在分时管理配置时使用已有方案。

      任意配置方案均可操作立即生效,但需注意若已设置分时管理调度,则会被下一个分时覆盖。因此如果想固定手动生效某个方案,需要清除其他所有分时设置,只保留该手动生效的方案,以确保当前操作能够立即生效而不被覆盖。

  6. (可选)资源配置方案的其他相关操作如下:

    • 查看配置方案

      伸缩配置页签,单击配置方案名称左侧的image图标,展开方案详情,查看各方案的具体信息。

    • 编辑配置方案

      伸缩配置页签,单击目标配置方案对应的操作列的编辑,更新配置方案。

      若该方案为当前生效方案,则编辑成功后,还需要单击操作列的立即生效才能启用最新的配置。

    • 删除配置方案

      伸缩配置页签,单击目标配置方案对应的操作列的删除,即可删除配置方案。

      Default方案和当前生效的方案不可删除。

    • 克隆配置方案

      伸缩配置页签,单击目标配置方案对应的操作列的克隆,即可克隆出一个新方案。

  7. 分时管理

    可以设置每日不同时间点启用不同的Quota配置方案,以此实现对Quota配置的分时管理。

    说明
    • 支持添加多个资源配置方案,每个方案配置不同,以便每日不同时段启用相应的方案,分时管理中最多支持48个配置方案被添加到时间计划中。

    • 分时调度会有一定的延迟,预计延迟时间为5分钟以内。

    1. 伸缩配置页签,单击分时管理区域的编辑时间计划

    2. 单击新增生效时间段,选择生效开始时间配置方案计划

      说明
      • 时间计划整体只有一份,默认运行时间为00:00(不可修改和删除),对应启用配置方案是Default(可修改)。如果没有增加运行时间,则代表全天都是启用同一个配置方案。

      • 支持整点和半点启用不同的配置方案,一个配置方案可以被重复启用。

查看Quota消耗

查看各个二级Quota内数据传输服务的资源消耗情况。默认主账号及其子账号都可查看。

操作流程如下:

  1. 登录MaxCompute控制台,在左上角选择地域。

  2. 在左侧导航栏,选择管理配置 > 配额(Quota)管理 。

  3. Quota管理页面,单击目标Quota对应操作列的资源消耗

    查看当前数据传输服务(包年包月)独享资源组的使用情况。

    指标名称

    说明

    请求并发数

    根据过滤条件展示对应Slot用量的曲线图,包含当前用量和Quota用量上限,单位为Slot。

    吞吐量

    根据过滤条件展示对应吞吐量的曲线图,单位以纵坐标展示单位为准,如B/minMB/min。

    表级别请求并发数

    展示过滤条件下,使用Tunnel Batch方式上传到testtable表的并发数曲线图,单位为Slot。

    过滤条件可选择使用方式(例如:Tunnel Batch上传)及表名称(例如:testtable)。

    表级别IP吞吐量

    展示过滤条件下,使用Tunnel Batch方式上传testtable表的各访问来源IP的吞吐量曲线图。

    过滤条件可选择使用方式(例如:Tunnel Batch上传)及表名称(例如:testtable)。

    总请求数和错误请求数

    根据过滤条件展示对应的总请求数和各类错误请求数量。其中:

    • 总请求数:是所有成功请求和错误请求的总和。

    • 错误请求数:指所有状态码为4XX5XX的请求,详细的状态码含义请参考文档数据传输服务概述

    数据量汇总

    根据过滤条件展示对应时间范围内,不同使用方式的数据量汇总,并通过饼图展示不同使用方式的占比。

    槽位平均传输速率

    展示过滤条件下,使用Tunnel Batch方式上传的请求单个Slot的平均传输速率。

    过滤条件可选择使用方式(例如:Tunnel Batch上传)。