开源Flink流批一体任务实时模式的资源配置支持配置任务的生产环境和开发的资源队列、引擎版本以及任务的并行读度、Task Manager数量、Job Manager Momory和Task Manager Momory。本文为您介绍如何配置流批一体任务实时模式的资源配置。操作...
开源Flink流批一体任务离线模式的资源配置支持配置任务的生产环境和开发的资源队列、引擎版本以及任务的并行度、Task Manager数量、Job Manager Momory和Task Manager Momory。本文为您如何配置流批一体任务离线模式的资源配置。操作步骤 ...
在开通过程中,系统会自动检查当前登录账号的企业实名认证、安全信息(手机号码或电子邮箱)及资源保有情况,然后判断其是否具备开通资源目录的条件,并根据判断结果推荐以下两种方式中的一种去开通资源目录。使用当前登录账号开通资源目录...
说明 资源中心是资源元数据中心的产品化升级,如果您之前已开通资源元数据中心,则您可以直接使用资源中心,无需再次开通。操作步骤 登录 资源中心控制台。在 资源中心 页面,单击 开通。资源中心的构建和数据更新通常需要几分钟的时间,在...
资源开启保护最佳实践用于检测ECS、RDS等云产品是否开启保护功能,例如:开启删除保护、更新保护等,如果未开启保护,建议及时发现并治理。本文为您介绍资源开启保护最佳实践合规包中的默认规则。规则名称 规则描述 ACK集群建议开启释放...
本文为您介绍资源开启公网检测最佳实践的业务背景、应用场景,以及合规包中的默认规则。业务背景 云上资源无限制的开启公网访问会带来较大的安全隐患和管理成本。基于对公网安全、成本、权限和监控等诉求,通常企业IT管理团队会统一部署...
背景 删除保护是云产品针对云资源的一种保护措施,防止资源被意外删除。当您启用删除保护时,针对资源的删除操作将会失败,有效避免因操作疏忽、团队成员沟通不及时等原因造成不可挽回的后果。本文为您介绍如何通过 系统运维管理 OOS...
调用InitResourceDirectory开通资源目录。开通资源目录后,系统会为您创建一个Root资源夹,并将当前账号设置为企业管理账号。该企业管理账号具有管理资源目录的所有权限。接口说明 说明 请使用经过企业实名认证的账号开通资源目录。个人...
开通资源中心。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来...
调用EnableResourceDirectory开通资源目录。接口说明 您可以使用当前登录账号或新创建管理账号两种方式开通资源目录。更多信息,请参见 开通资源目录。本文将提供一个示例,使用当前登录账号开通资源目录。调试 您可以在OpenAPI Explorer中...
调用EnableResourceDirectory开通资源目录。接口说明 您可以使用当前登录账号或新创建管理账号两种方式开通资源目录。更多信息,请参见 开通资源目录。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,...
开通资源组SLS日志投递功能。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action ...
为威胁分析开通资源目录授权,需要使用资源目录管理员调用。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以...
操作 API 访问级别 资源类型 条件关键字 关联操作 暂无数据 资源(Resource)开源大数据平台 E-MapReduce(EMR)不支持在RAM权限策略语句的 Resource 中指定资源ARN。如果要允许对 开源大数据平台 E-MapReduce(EMR)的访问权限,请在策略...
开通后,资源中心将为资源目录内所有成员开通资源中心,并在所有成员中创建一个名为AliyunServiceRoleForResourceMetaCenter服务关联角色,资源中心将使用该角色获取资源目录的组织结构及构建多账号资源中心。更多信息,请参见 资源中心...
1.... 根据服务初始化的页面,设置建模相关的环境,包括机器学习平台...后面在“全链路服务”增加引擎资源和日志资源之后,相应的需要创建权限策略PaiRecEngineAccess和PaiRecMonitorAccess,同样类似的需要主账号给引擎开发者、运维授权。
操作 访问级别 资源类型 条件关键字 关联操作 resourcecenter:GetMultiAccountResourceCenterServiceStatus Read 全部资源*无 无 请求参数 名称 类型 必填 描述 示例值 当前API无需请求参数 返回参数 名称 类型 描述 示例值 object 返回...
调用EnableAssociatedTransfer开通关联资源跟随转组功能。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在...
资源观测功能提供了对工作空间及队列的计算单元(CU)消耗的直观监控,并支持按照时间维度进行筛选与分析。访问资源观测页面 登录 E-MapReduce控制台。在左侧导航栏,选择 EMR Serverless>Spark。在 Spark 页面,单击目标工作空间名称。在 ...
在执行任务前,必须先将所需的文件或JAR包等资源上传至EMR Serverless Spark,以确保任务运行时可以无缝地访问和使用所有必要资源。操作步骤 进入资源上传页面。登录 E-MapReduce控制台。在左侧导航栏,选择 EMR Serverless>Spark。在 ...
调用JoinResourceGroup接口,将EMR相关资源加入资源组。资源是您在阿里云创建的云服务实体,E-MapReduce支持资源组的云资源为集群和项目。在集群加入一个资源组时,集群每个节点ECS实例会同步加入集群所属资源组。资源组是项目、环境或者栈...
创建文件 进入资源中心页面。使用阿里云账号(主账号)或RAM用户登录 E-MapReduce控制台。在左侧导航栏,选择 EMR Workbench>Workflow。在Workflow页面,单击目标工作空间操作列的 控制台。单击上方的 资源中心 页签。在 文件管理 页面,...
EMR弹性伸缩功能提供集群资源变化分析和弹性伸缩规则推荐。本文为您介绍如何在EMR控制台查看集群资源概览。前提条件 已创建数据湖(DataLake)或自定义场景(Custom)类型的集群,且选择了YARN服务。创建集群详情,请参见 创建集群。操作...
资源组会对您拥有的云资源从用途、权限和归属等维度上进行分组,实现企业内部多用户、多项目的资源分级管理。一个云资源只能属于一个资源组,云资源之间的关联关系不会因加入资源组而发生变化。E-MapReduce目前支持资源组的云资源为集群和...
如果您有资源隔离和管理的需求,可以通过添加队列的方式实现。本文为您介绍队列的基本操作。前提条件 已创建工作空间,详情请参见 管理工作空间。添加队列 说明 您可以通过添加队列来实现对资源的隔离和管理。如果不添加新的资源队列,您...
由于EMR管控服务会根据勾选的服务进行整体资源分配,因此,如果勾选的服务数量过多,可能会导致在分配逻辑下,分给YARN的内存资源相应减少。另外,还需考虑ECS节点组配置的规格是否过低,以致无法有效支撑当前安装的所有EMR服务组件所需的...
资源备份功能开启最佳实践检测云数据库Redis、云数据库PolarDB和云数据库RDS等云产品是否开启资源备份,如未开启建议及时发现并治理。本文为您介绍资源备份功能开启最佳实践中的默认规则。规则名称 规则描述 ECI弹性实例容器组挂载数据卷 ...
将一个EMR资源加入目标资源组。一个资源只能属于一个资源组。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求...
调用DeleteResourceQueue接口,删除资源队列。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
调用ModifyResourcePool接口,更新资源池。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
调用ModifyResourceQueue接口,修改资源队列。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
调用CreateResourceQueue接口,创建资源队列。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
计费准则 调度资源组费用=资源规格单价*资源数量*计费时长 资源规格 默认调度资源组 首次开通EMR Workflow服务时,免费提供了一个默认调度资源组。该默认资源组不会进行计费,可以长期免费使用。规格名称 规格 资源数量 调度资源组 建议...
本文主要介绍通过简单规则来评估一般业务场景下EMR Kafka集群所需硬件资源。实际业务场景中,您可以通过这些规则评估出资源规模后,再结合负载测试来确定最终的集群规格。集群创建后,您也可以根据实际资源使用率通过集群扩容功能来变更...
资源队列用于管理和调度集群资源,旨在实现资源的灵活分配和优化。通过阿里云EMR控制台,您可以方便地管理资源队列,并关联不同的分区。前提条件 已创建集群,且集群状态为运行中。创建集群详情,请参见 创建集群。使用限制 YARN调度器需...
调用DeleteResourcePool接口,删除指定资源池。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是...
调度资源组用于任务的调度运行。首次开通EMR Workflow服务时,将免费为您提供一个默认调度资源组。如果默认调度资源组不能满足您的需求,您可以根据业务场景需求购买合适规格的付费调度资源组。购买调度资源组后,在实际使用前您还需进行...
调用CreateResourcePool接口,创建YARN资源池。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是...
关于资源目录的更多信息,请参见 资源目录概述。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限...
调用ModifyResourcePoolSchedulerType接口,修改资源池调度类型。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述...