使用负载感知调度

ack-koordinator默认会将资源画像、精细化调度等功能的监控指标以Prometheus的格式对外透出。若您配置组件时开启了 ACK-Koordinator开启Prometheus监控指标 选项并使用了阿里云Prometheus服务,这些指标将被视为 自定义指标 并产生相应费用...

概述

子查询支持 在并行查询下子查询有四种执行策略:在Leader线程中串行执行 当子查询不并行执行时,例如2个表JOIN,在JOIN条件上引用了用户的函数,此时子查询会在Leader线程上进行串行查询。在Leader上并行执行(Leader会启动另一组Worker...

调度概述

ACK Scheduler支持不同弹性资源的混合调度、异构资源的精细化调度、批量计算的任务调度等,提升应用的性能和集群整体资源的利用率。本文介绍弹性调度、任务调度、异构资源调度、负载感知调度和精细化调度的主要功能。弹性调度 ACK为不同...

调度模式

本文提供了您在调用API操作RPA客户端时可以设置的客户端调度状态。实例状态 状态说明 attend 不可调度 unmanned 可调度

YARN调度

基础架构&核心流程 CapacityScheduler的主调度流程有三种触发方式:节点心跳驱动(Node-Heartbeat Driven):是面向节点的局部调度(当调度器收到每个节点心跳时触发,为当前节点选择可调度的应用),受限于心跳间隔时间与接近随机调度,...

资源调度概述

ACS兼容Kubernetes原生调度能力,支持不同类型的工作负载混合调度,并提供弹性资源、异构资源等精细化调度能力。本文介绍ACS兼容的Kubernetes原生调度能力和任务调度能力。兼容的Kubernetes原生调度能力 ACS兼容Kubernetes原生调度能力,但...

并行查询使用限制和兼容性问题

串行化隔离级别事务内的查询语句无法并行。隔离级别是Repeatable-read的情况下,事务内的INSERT.SELECT/REPLACE.SELECT查询部分无法并行。与串行执行结果可能不兼容的地方 错误提示次数可能会变化 串行执行中出现错误提示的查询,在并行...

配置并使用调度参数

表达式方式 表达式定义 调度参数配置界面默认使用可视方式定义参数,如果您习惯使用表达式定义,则单击 表达式定义 进行参数定义。说明 使用表达式定义时,多个参数之间使用空格分隔。当通过 表达式定义 方式,添加、删除或修改...

数据开发:开发者

说明 若当节点查询(即使 select 语句)非DataWorks调度节点产出的表数据,您选择 自动解析 为否,并使用工作空间根节点来调度当前节点运行。若当前节点查询(即使 select 语句)其他任务产出的表数据,您通过以下方式配置当前节点...

设置节点调度状态

选择 更多>调度设置,在弹出框中关闭节点可调度开关,单击 确定。将节点标识为不可调度状态,已有的Pod可以继续对外提供服务,但后续新建Pod不会再调度到该节点。选择 更多>节点排水,在弹出框中单击 确定。排空节点上的已有Pod,但由...

AI负载调度

弹性调度提供差异化调度ECS和ECI资源的能力,支持自定义弹性资源优先级调度策略。在应用发布或扩容过程中,按照自定义资源策略,设置应用实例Pod被调度到不同类型节点资源的顺序。同时在缩容过程中按照原调度顺序逆序缩容。例如在扩容过程...

创建多可区的ECI Pod

说明 如果没有配置多可调度策略,默认采用VSwitchRandom(随机)策略。策略 调度说明 VSwitchOrdered(按指定顺序)如果ECI Pod挂载了云盘,云盘所属可用区必须和Pod一致,不符合的可用区会被过滤。按照指定的顺序尝试创建资源,当第一...

消息 Mesh

消息 Mesh 流量调度:消息流量精细化调度上的思考和在 Mesh 上的实现与落地。消息 Mesh 简介 Service Mesh 作为云原生场景下微服务架构的基础设施(轻量级的网络代理),正受到越来越多的关注。Service Mesh 不仅负责在微服务架构的复杂...

扩展MapReduce(MR2)

与Hadoop Chain Mapper/Reducer对比 Hadoop Chain Mapper/Reducer也支持类似的串行化Map或Reduce操作,但和MaxCompute的扩展MapReduce(MR2)模型有本质的区别。Chain Mapper/Reducer基于传统的MapReduce模型,仅可以在原有的Mapper或...

成本分摊模型概述

以Java为代表的内存型应用中,应用Pod会向集群申请大量内存资源(Memory Request),导致内存的调度水位升高,内存变成决定集群是否可调度的“昂贵”资源,而CPU则变成了“便宜”的资源。此场景下,使用单一资源模型进行成本分摊较为合理:...

节点调度

您可以通过控制台设置节点调度状态,从而合理分配各节点的负载。前提条件 已创建集群 或 已导入集群 暂停调度 节点暂停调度后,在后续进行应用部署时,Pod 不会再调度到该节点。...返回到节点详情页,可以看到节点状态将变为 可调度

隔离等级

它确保提交的写入操作和所有读取都是序列。只要有一个串行序列一次执行一项操作,且生成与表中所示相同的结果,则执行这些操作。对于写操作,串行序列与表历史记录中的序列完全相同。WriteSerializable(默认):隔离级别比...

GPU节点调度属性标签

安装云原生AI套件的调度组件ack-ai-installer之后,您可以为GPU节点打上调度属性标签,帮助GPU节点启用共享GPU调度、GPU拓扑感知调度等能力。本文介绍GPU节点调度属性标签及如何切换标签的值。GPU节点调度属性标签说明 标签ack.node.gpu....

kube-scheduler组件监控

队列种类如下:unschedulable:表示不可调度的Pod数量。backoff:表示backoffQ的Pod数量。active:表示activeQ的Pod数量。scheduler_pod_scheduling_attempts_bucket Histogram 调度器尝试成功调度Pod的次数,Bucket阈值为1、2、4、8、16。...

kube-scheduler

修复剩余IP感知调度中由于剩余IP计数错误导致可调度Pod变少的问题 v1.24.6-aliyun-6.3.548a9e59 2024年01月10日 自定义弹性资源优先级调度 调度修复了使用自定义弹性资源优先级调度时,ECI可用区亲和以及打散不生效的问题。CPU拓扑感知调度...

DataWorks资源组概述

任务同一个执行阶段可选择不同类型的资源组,例如,离线任务调度可选择包年包月独享调度资源组,或按量付费公共调度资源组,数据集成离线任务执行可选择包年包月独享数据集成资源组,关于资源组选择详情请参见 资源组选择。DataWorks的公共...

CPU拓扑感知调度

ack-koordinator默认会将资源画像、精细化调度等功能的监控指标以Prometheus的格式对外透出。若您配置组件时开启了 ACK-Koordinator开启Prometheus监控指标 选项并使用了阿里云Prometheus服务,这些指标将被视为 自定义指标 并产生相应费用...

EDAS应用支持金丝雀发布时指定任务调度比例

任务调度 开启或关闭。开启:配置按比例任务调度规则生效。关闭:配置按比例任务调度规则不生效。Schedulerx任务 任务调度规则的作用范围。目前仅支持对一个SchedulerX应用分组中所有任务生效,即所有任务都会按照 调度比例 被调度至灰度...

计算资源使用

通过对Quota配置规则条件,实现满足规则条件的作业可调度到对应Quota。配额组(Quota)使用逻辑图如下所示。Project设置默认Quota Project设置默认计算Quota,即此Project发起的作业默认会使用默认Quota的资源进行计算,无需其他设置。新建...

集群调度

ADP底座提供了集群整体的精细化调度能力,可以在一个配置文件中,以全局的视角,根据不同业务场景(例如中间件、核心业务应用、非核心业务应用等)筛选不同的Workload,然后配置统一的调度策略和资源隔离策略等。Spec定义 Workload 发布...

查看并管理脚本实例

置成功继续调度 将运行 失败 或 未运行 的脚本实例节点手动置运行成功,继续参与调度。单击 置成功继续调度,并在 置成功继续调度 提示对话框中单击 确定,即可完成设置。终止 仅 成功、失败、未运行 的实例不支持终止,其他状态实例均...

基础监控

混部资源总量越大,说明集群中供应混部的空闲物理资源越多,通过在离线混部调度更多应用的潜在收益越大。混部资源分配量 分为CPU和内存两个资源维度,分别展示了集群当前为应用混部已分配的CPU资源量和内存资源量。如上图所示,集群...

数据开发概述

DataWorks数据开发(DataStudio)模块用于定义周期调度任务的开发及调度属性,与运维中心配合使用,面向各引擎(MaxCompute、Hologres、EMR等)提供可视开发主界面,支持智能代码开发、多引擎混编工作流、规范任务发布等能力,帮助您...

什么是云迁移中心

另外内置的轻量化调度中心,可以实现大量迁移任务分组、分片的调度 产品功能 迁云成本评估(TCO)云迁移中心CMH提供全面的企业上云评估,包括从其他云厂商迁移至阿里云或者从自建IDC上云。您可以快速获取阿里云购买清单和成本比较,辅助...

服务运行

容器层 阿里云弹性伸缩提供通用应用弹性模型(例如,HPA容器水平伸缩、CronHPA定时伸缩、VPA纵向伸缩和组件水平调整),也提供领域应用弹性模型(例如,事件驱动伸缩、Knative无服务器弹性框架、ElasticWorkload精细化调度弹性及Spark ...

XxlJob任务

背景信息 XXL-JOB是一个开箱即的轻量级分布式任务调度系统,其核心设计目标是开发迅速、学习简单、轻量级、易扩展,在开源社区广泛流行,已在多家公司投入使用。XXL-JOB开源协议采用的是GPL,因此云厂商无法直接商业托管该产品,各大中...

Spring任务

通过对接SchedulerX任务调度可快速实现企业运用的支持。前提条件 客户端1.7.10及以上版本 采用Spring Boot模式接入SchedulerX平台具体操作,请参见 Spring Boot应用接入SchedulerX。接入指南 接入配置 以Spring Boot接入模式为例,应用...

DataWorks On CDP/CDH使用说明

环境准备 一、资源准备 类别 描述 相关文档 版本选择 DataWorks基础版服务满足 CDP或CDH 基本的数据上云、数据开发与调度生产、简单的数据治理工作,若需获取更专业的数据治理、数据安全解决方案,选择相应的 标准版、专业版、企业版 ...

文档修订记录

订阅成功后,账单数据会定时同步至MaxCompute,您使用DataWorks的数据分析功能查询并分析账单数据,将分析结果生成可视图表卡片及报告,同时,也将您的阿里云消费分析报告分享给其他用户。账单数据订阅及查询分析 2024.2.21 新增功能...

RunServiceSchedule-执行设备服务调度

枚举类型,取值范围:容器场景:Start:选择并激活一个可调度云设备,启动服务 Stop:结束并释放云设备 Console:Uuid 处于调度中状态时,进行命令交互 裸金属/虚机场景:PreSchedule:预调度并锁定虚机实例 Confirm:确认调度 Cancel:...

资源使用优化

使用更实时、更主动、更智能的 容器服务ACK精细化调度 是获得良好用户体验的关键。通过计算资源的弹性调度,完成指标收集、在线决策、离线分析、决策优化的闭环。管理存储生命周期 随着应用与业务系统的长期运行,企业将积累大量数据。同时...

创建资源

本文介绍如何创建微服务空间、调度任务分组、调度任务和调度工作流。背景信息 资源 描述 使用场景 命名空间 在具体地域(Region)中,命名空间用于实现资源和服务的隔离。当您对资源有较高的安全要求时,需要创建命名空间。应用 在具体的...

功能更新动态(2023年)

创建Flink SQL任务 新建元表 新建镜像表 调度运维 新增支持创建补数据任务:支持配置补数据任务,设置定时补数据或手动触发补数据,以回刷节点范围和业务日期相对规律,确定补数据的场景,减少人工投入。补数据任务业务日期支持选择最近n...

管理工作流定义

工作流定义是通过拖拽任务节点并建立任务节点之间的关联来创建可视的DAG(有向无环图)。本文为您介绍如何创建工作流及工作流定义的相关操作。前提条件 已新建项目,详情请参见 管理项目。创建工作流 进入项目管理页面。使用阿里云账号...

Spring应用接入SchedulerX

您可以为您的Spring应用快速接入SchedulerX,实现分布式任务调度能力。前提条件(选)已创建命名空间。具体操作,请参见 创建命名空间。已创建资源。具体操作,请参见 创建资源。Spring应用客户端接入SchedulerX 在应用程序的 pom.xml ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
DataV数据可视化 云防火墙 日志服务 音视频通信 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用