管理工作空间

工作空间是EMR Serverless Spark管理任务、成员,分配角色和权限的基本单元。您所有的配置、任务、工作流均在具体的工作空间下进行。工作空间管理员可以加入成员至工作空间,并赋予工作空间管理员、数据分析、数据开发或访客角色,以实现多角色协同工作。本文为您介绍工作空间的基本操作。

前提条件

  • 已注册阿里云账号并完成实名认证。具体操作请参见账号注册(PC端)

  • 已准备创建工作空间所需的账号并授权:

    • 使用阿里云主账号创建,授权详情请参见阿里云账号角色授权

    • 如果使用RAM用户(子账号)或RAM角色创建,请确保已授权该RAM用户或RAM角色AliyunEMRServerlessSparkFullAccessAliyunOSSFullAccessAliyunDLFFullAccess权限策略。然后,在EMR Serverless Spark访问控制页面添加该RAM用户或RAM角色,并授予管理员角色,详情请参见RAM用户授权管理用户和角色

  • 已开通DLF数据湖构建,详情请参见快速入门。支持开通DLF的地域请参见已开通的地域和访问域名

  • 已开通OSS服务并创建了存储空间,详情请参见开通OSS服务创建存储空间

创建工作空间

  1. 进入EMR Serverless Spark工作空间页面。

    1. 登录E-MapReduce控制台

    2. 在左侧导航栏,选择EMR Serverless > Spark

  2. Spark页面,单击创建工作空间

  3. 创建工作空间对话框中,完成相关配置。

    参数

    说明

    地域

    地域指数据中心所在的地理区域,建议选择与您数据所在地相同的地域,创建完成后不支持更改地域。

    付费类型

    支持包年包月按量付费模式。

    重要

    张家口地域仅支持创建按量付费模式的工作空间。

    工作空间名称

    长度限制为1~64个字符,仅可使用中文、字母、数字、短划线(-)和下划线(_)。

    说明

    同一个阿里云账号下的工作空间名称是唯一的,请勿填写已有的名称,否则会提示您重新填写。

    瞬时配额上限

    工作空间同时处理任务的最大并发CU数量。

    工作空间基础路径

    用于存储作业日志、运行事件、资源等数据文件。为了在运维阶段近实时地查看增量日志,建议您选择一个开通了OSS-HDFS服务的Bucket。

    DLF 作为元数据服务

    用于存储和管理元数据。请选择工作空间关联的元数据目录ID,您也可以通过以下步骤新建一个数据目录。

    1. 单击创建数据目录,在弹出的对话框中输入目录ID,然后单击确定

    2. 在下拉列表中,选择您新建的数据目录。

    说明

    创建工作空间后,您还可以将已有的DLF数据目录添加到工作空间中,更多介绍请参见数据目录

    执行角色

    指定EMR Serverless Spark运行任务所采用的角色名,默认角色名称为AliyunEMRSparkJobRunDefaultRole

    EMR Spark使用该角色来访问您在其他云产品中的资源,包括OSSDLF等产品的资源。如果您希望自主控制执行角色的权限点,可以使用自定义执行角色,详情请参见执行角色

    高级设置

    标签:是云资源的标识,能够帮助您从不同维度对具有相同特征的云资源进行分类、搜索和聚合,从而提升资源管理效率。每个工作空间最多支持绑定二十个标签,每个标签由自定义的标签键和标签值组成,满足您多样化的管理需求。同时,标签还支持进行成本分账和按量付费的精细化管理。

    您可以在创建工作空间时直接绑定标签,也可以在工作空间创建完成后,随时在工作空间列表页添加或调整标签。通过为资源绑定标签,您可以轻松实现资源的分类与运营优化。

  4. 单击创建工作空间

删除工作空间

重要
  • 删除工作空间前,请确认该工作空间下不存在运行中的任务。如果该工作空间中存在还在运行的任务,则会报错,提示您停止运行的任务后再删除工作空间。

  • 工作空间删除后,您工作空间下的资源将被释放,包括任务和数据,这些资源将无法恢复。因此,请您在删除之前务必进行任务脚本的备份,以免数据丢失。

  • 工作空间所关联的OSS/OSS-HDFS上的日志等数据,不会随着工作空间的销毁而删除。

根据付费类型的不同,删除工作空间的步骤如下:

  • 包年包月:需先退订包年包月配额订单,退订后对应的工作空间将被删除。更多详细信息,请参见退订说明

  • 按量付费:

    1. Spark页面,单击目标工作空间操作列的删除

    2. 在弹出的对话框中,输入工作空间名称,确认执行该操作,单击确定

编辑包年包月配额

  1. Spark页面,选择目标工作空间操作列的image > 编辑包年包月配额

  2. EMR Serverless Spark预留资源 | 变配页面,调整CU配额参数,单击立即购买

编辑按量配额上限

  1. Spark页面,选择目标工作空间操作列的image > 编辑按量配额上限

  2. 在弹出的对话框中,调整按量配额上限(CU)参数,单击确定

相关文档

  • 如果您需要将更多的RAM用户添加至工作空间,并为其分配不同角色以便协同开发,您可以通过访问控制功能将RAM用户引入工作空间,并为其指派相应的角色权限,详情请参见管理用户和角色

  • 如果您有资源隔离和管理的需求,可以通过添加队列的方式实现,详情请参见管理资源队列