如何结束 AHAS Agent 进程

这一功能保证了进程可用性,避免进程因异常挂掉或机器重启等原因,需要手动拉起的情况。所以,您在服务器进程中结束 AHAS Agent 无法永久结束该进程,AHAS 会在定时检查后或机器重启时,自动拉起该进程。如果您某段时间不需要使用 AHAS ...

Co、递归调用

前言 我们知道,同步的递归写法,如果在退出递归条件失效时,会快速因为栈溢出导致进程挂掉。而在某些场景下,我们会采用异步的递归写法来规避这个问题:async function recursive(){ if(active)return;do something await recursive();} ...

Pod异常问题排查

解决方案 查看Pod的事件,根据事件描述,定位Pod不能被调度到节点的原因。主要原因有以下几类:资源依赖 创建Pod时,需要依赖于集群中ConfigMap、PVC等资源。例如,Pod添加存储卷声明前,存储卷声明需要先与存储卷绑定。资源不足 在集群...

Pod异常问题排查

解决方案 查看Pod的事件,根据事件描述,定位Pod不能被调度到节点的原因。主要原因有以下几类:资源依赖 创建Pod时,需要依赖于集群中ConfigMap、PVC等资源。例如,Pod添加存储卷声明前,存储卷声明需要先与存储卷绑定。资源不足 在集群...

kube-scheduler

v1.26.3-aliyun-5.9-cd4f2cc3 2023年11月16日 优化由于云盘类型不满足调度失败的原因展示。v1.26.3-aliyun-5.8-a1482f93 2023年10月16日 新增支持Windows节点调度。优化Coscheduling处理多任务同时调度时的调度速度,减少任务阻塞的情况。v...

设置Pod故障处理策略

此时,Pod status.reason不会显示ContainerInstanceScheduleFailed,您也可以查看Pod status condition,通过ContainerInstanceCreated的reason和message确定当前调度周期内调度失败的原因。{"conditions":[{"lastProbeTime":"2023-03-30T...

使用Gang scheduling

功能介绍 Gang scheduling策略可在并发系统中将多个相关联的进程调度到不同处理器上同时运行。最主要的原则是保证所有相关联的进程能够同时启动,防止部分进程的异常,避免整个关联进程组的阻塞。例如,当您提交一个包含多个任务的批量Job...

使用Gang scheduling

功能介绍 Gang scheduling策略可在并发系统中将多个相关联的进程调度到不同处理器上同时运行。最主要的原则是保证所有相关联的进程能够同时启动,防止部分进程的异常,避免整个关联进程组的阻塞。例如,当您提交一个包含多个任务的批量Job...

Dataphin补数据任务空跑调度了是什么原因

问题描述 Dataphin补数据任务空跑调度了是什么原因?问题原因 按当前的调度配置,补20220930(月末)的数据空跑了是正常的。补数据选择的是业务日期,而调度周期配置的是调度日期,如果补数据时选择的业务日期是20220930,那么对应的调度...

工作负载推荐配置

一个Running状态的Pod,里面的进程可能发生了死锁而无法提供服务。但是因为Pod还是Running的,Kubernetes也不会自动重启这个Pod。所以我们要在所有Pod上配置Liveness Probe,探测Pod是否真的存活,是否还能提供服务。如果Liveness Probe...

数据集成侧同步任务配置

周期设置:由于需要进行周期性调度,所以需要定义周期性调度任务时的相关属性,包括 调度周期、生效日期、暂停调度 等。当前方案的调度配置与DataWorks中节点的调度配置一致,参数详情可参见 时间属性配置说明。设置任务运行资源 在此步骤...

智能监控概述

智能监控功能支持您...通过报警信息页面查看 您也可以通过报警信息页面查看智能监控模块产生的所有报警信息,并通过报警详情查看报警的完整触发流程,包括触发该报警的监控规则、报警触发条件、您收到报警的原因等。详情请参见:报警信息。

如何使用Prometheus监控Windows

指标名称 指标级别 指标来源 指标说明 进程CPU占用时间 Major WMI(PercentPrivilegedTime/PercentUserTime)该指标可以直观体现进程占用CPU情况,因此您需要重点关注耗用CPU高或突变的进程异动。进程句柄数 Recommend WMI(HandleCount)...

如何使用Prometheus监控Windows

指标名称 指标级别 指标来源 指标说明 进程CPU占用时间 Major WMI(PercentPrivilegedTime/PercentUserTime)该指标可以直观体现进程占用CPU情况,因此您需要重点关注耗用CPU高或突变的进程异动。进程句柄数 Recommend WMI(HandleCount)...

附录:周期任务补数据

暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的运行状态:暂停运行(可能会阻断补数据进程):即暂停调度的任务生成的补数据实例均暂停运行,会阻断下游实例正常运行。说明 适用于当前任务及其下游任务均不需要运行的场景。...

Linux实例系统总体负载的查询及分析

nice:通过nice改变了进程调度优先级的进程,在用户模式下消耗的CPU时间比例。system:系统模式下消耗的CPU时间比例。iowait:CPU等待磁盘I/O导致空闲状态消耗的时间比例。steal:利用Xen等操作系统虚拟化技术,等待其它虚拟CPU计算占用的...

节点自动伸缩

当Pod处于Pending状态的原因调度资源不足的时候,会触发cluster-autoscaler的模拟调度,模拟调度器会计算在配置的伸缩组中哪个伸缩组弹出节点后可以调度这些Pending的Pod。如果有伸缩组可以满足需求,那么就弹出相应的节点。模拟调度就是...

性能监控指标

而平均负载不仅包括正在使用 CPU 的进程,还包括等待 CPU 或 I/O 的进程。因此,两者不能等同,有两种常见的场景如下所述:CPU 密集型应用,大量进程在等待或使用 CPU,此时 CPU 使用率与平均负载呈正相关状态。I/O 密集型应用,大量进程在...

Java SDK

无 1.2.3.1,2020-12-16 变更类型 功能描述 相关文档 优化 优化客户端负载高把任务调度长连接打,导致任务无法继续调度的问题。无 1.2.2.2,2020-12-10 变更类型 功能描述 相关文档 新增 支持容器内采集容器真实CPU使用率。需要增加配置...

2019年

修复任务实现类配置错误的情况下会触发Spring Boot的ServeletWebServer停止的逻辑,导致业务进程在,但是Web服务被shutdown问题。修复系统启动变量 user.dir='/',任务会卡住的问题。客户端 springContext.getBean 报 ...

XxlJob任务

高可用 SchedulerX 2.0采用高可用架构,任务多备份机制,经历过阿里集团多年双十一、容灾演练等场景的考验,可以做到整个集群挂掉任意2个节点或者任意一个机房断电,任务调度都不会受到影响。商业化报警运维 SchedulerX 2.0除了兼容XXL-JOB...

WAL日志并行回放

Hold List:并行执行框架中,每个子进程调度执行回放子任务所使用的链表。原理介绍 概述 一条WAL日志可能修改多个数据块Block,因此可以使用如下定义来表示WAL日志的回放过程:假设第 i 条WAL日志LSN为 LSN i ​,其修改了 m 个数据块,则...

ECS实例的服务进程自动关闭,如何排查?

问题描述 ECS实例的进程异常,自动关闭。问题原因 服务进程关闭一般有如下几种原因:系统原因。程序本身异常退出。系统中毒。操作步骤 您可以参考以下操作步骤排查问题。检查以下可能导致服务进程关闭的系统原因。ECS的云盘空间被占满。...

XxlJob任务

高可用 SchedulerX 2.0采用高可用架构,任务多备份机制,经历过阿里集团多年双十一、容灾演练等场景的考验,可以做到整个集群挂掉任意2个节点或者任意一个机房断电,任务调度都不会受到影响。商业化报警运维 SchedulerX 2.0除了兼容XXL-JOB...

XxlJob任务

高可用 SchedulerX 2.0采用高可用架构,任务多备份机制,经历过阿里集团多年双十一、容灾演练等场景的考验,可以做到整个集群挂掉任意2个节点或者任意一个机房断电,任务调度都不会受到影响。商业化报警运维 SchedulerX 2.0除了兼容XXL-JOB...

Java后台进程自动关闭如何排查

请您参照以下步骤分析进程关闭的原因。执行以下命令,检查是否使用nohup的方式。nohup java-jar xxx.jar>./xxxx.log 2>&1&说明:nohup运行命令可以使命令永久的执行下去。断开终端也不会受到影响。检查是否为 out of memory(内存溢出)。...

使用负载热点打散重调度

ack-koordinator组件提供负载热点打散重调度能力,可以感知集群内节点负载的变化,自动地优化超过负载水位安全阈值的节点,防止出现负载极端不均衡的情况。本文介绍如何使用负载热点打散重调度及其高级配置参数。使用限制 仅支持ACK Pro版...

AI负载调度

本文介绍弹性资源调度、AI任务调度、异构资源调度和任务队列调度,帮助用户提升集群的资源利用率和作业运行效率。弹性调度 ACK为不同弹性资源提供了混合调度的能力。功能 描述 参考文档 弹性调度 阿里云提供了不同种类的弹性资源,如ECS和...

调度概述

本文介绍弹性调度、任务调度、异构资源调度、负载感知调度和精细化调度的主要功能。弹性调度 ACK为不同弹性资源提供了混合调度的能力。功能 描述 参考文档 弹性调度 阿里云提供了不同种类的弹性资源,如ECS和ECI,以及不同的付费类型如包年...

计费概述

本文介绍分布式任务调度SchedulerX的各计费项及其计费规则。基本概念 任务类型:调度任务的类型。包含单机任务和非单机任务(广播、分片、并行和网络任务等)。任务调度总量:通过SchedulerX配置并启用的分布式任务调度总规模,单位为CU...

调度依赖配置指引

DataWorks的调度依赖是指周期调度节点间的上下游依赖关系。通过节点的依赖关系有序调度运行上下游节点,即当上游节点运行成功后,下游节点才会启动运行,保障适时的产出有效业务数据。本文为您介绍调度依赖的配置指引,避免因调度依赖配置...

调度中心

本文介绍调度中心功能的具体使用流程,帮助您快速掌握创建、查看及使用调度组。功能简介 调度中心功能可以帮助您实现对迁移任务的自动调度,支持将迁移任务加入调度组,并按照您自定义的调度规则自动执行迁移任务。通常,使用调度中心您...

配置调度日历

DataWorks在原有调度配置基础上,新增自定义调度日历功能,您可通过该功能实现更灵活的任务调度日期与调度方式定义。本文为您介绍自定义调度日历的典型应用场景及如何在DataWorks上新增并使用自定义调度日历。背景信息 自定义调度日历适用...

配置资源属性

周期任务的运行依赖于调度资源组,您可以在目标任务调度配置的资源属性区域,选择任务调度运行时需要使用的资源组。配置资源组 进入数据开发节点的编辑页面,单击右侧导航栏的 调度配置,在 资源属性 区域配置节点调度时使用的资源组。在 ...

配置离线管道调度

调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系,同时上游节点的状态将影响其他下游节点的运行状态。配置了...

配置离线管道调度

调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系,同时上游节点的状态将影响其他下游节点的运行状态。配置了...

调度参数支持的格式

调度参数是DataWorks任务调度时使用的参数,可根据您配置的调度参数取值规则,在每次任务运行时自动替换为真实的取值,实现任务调度时间内参数的动态替换。本文为您介绍调度参数支持的格式及相关使用。背景信息 您可在代码中通过${变量名} ...

配置逻辑表调度属性

逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则。本文为您介绍如何配置维度或事实逻辑表的调度属性。操作步骤 请参见 数据开发入口,进入数据 开发 页面。按照下图操作指引,选择您需配置调度属性的逻辑表,进入 调度配置 信息...

时间属性配置说明

时间属性用于定义节点在生产环境的周期调度方式。您可通过调度配置的时间属性,配置节点生成周期实例的方式,实例调度周期与执行时间,是否支持重跑,任务执行超过多长时间自动退出等。本文为您介绍如何配置节点的调度时间属性。背景信息 ...

调度设置

若您已熟悉DataWorks的调度配置,则可参考本章节了解更多调度相关的高阶功能;若您才开始使用DataWorks的调度配置,请先前往 任务调度配置概述,了解调度配置的基础功能。
共有196条 < 1 2 3 4 ... 196 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
音视频通信 批量计算 威胁情报服务 视觉计算服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用