Shared Server
支持配置Shared Server调试日志，方便排查后端进程调度相关的任何问题。参数说明 Shared Server的典型配置参数说明如下：参数 说明 polar_enable_shm_aset 是否开启全局共享内存。默认关闭，重启生效。取值如下：on：开启全局共享内存。off...
使用Gang scheduling
功能介绍 Gang scheduling策略可在并发系统中将多个相关联的进程调度到不同处理器上同时运行。最主要的原则是保证所有相关联的进程能够同时启动，防止部分进程的异常，避免整个关联进程组的阻塞。例如，当您提交一个包含多个任务的批量Job...
使用Gang scheduling
功能介绍 Gang scheduling策略可在并发系统中将多个相关联的进程调度到不同处理器上同时运行。最主要的原则是保证所有相关联的进程能够同时启动，防止部分进程的异常，避免整个关联进程组的阻塞。例如，当您提交一个包含多个任务的批量Job...
开启和管理健康检查
如果在响应超时时间（3秒）之内，全球加速实例收到终端节点返回的RST数据包，则认为终端节点未响应健康检查端口，判定健康检查失败。如果已超出响应超时时间（3秒），全球加速实例还未收到终端节点返回的SYN+ACK数据包，则认为网络无法到达...
YARN调度器
核心调度未考虑整个集群的资源布局，也不支持Node Labels（分区调度）、Node Attributes（节点打标调度）、Placement Constraints（放置约束）等调度特性。CapacityScheduler：是Apache Hadoop社区、HDP（Hortonworks Data Platform）及...
进程监控
您还可以添加进程监控，查看其进程数，并为这些进程设置报警规则，及时关注进程数的变化，确保其正常运行。前提条件 请确保您已为阿里云主机（ECS实例）和非阿里云主机安装云监控插件。具体操作，请参见 安装云监控插件。背景信息 云监控每...
使用负载热点打散重调度
cpu usage(76.72%)>threshold(50.00%)"55s Normal Killing pod/stress-demo-588f9646cf-7*Stopping container stress 步骤一：安装或修改组件ack-koordinator并开启重调度 未安装ack-koordinator组件 安装ack-koordinator组件，并在 安装...
订阅常见问题
调度状态指是否会在周期内执行发送任务，未调度在周期内不会发送邮件。调度状态会按照设置的时间定时发送邮件，调度状态下会出现邮件发送成功或者失败的现象。邮件订阅发送失败，日志信息提示“has no valid receiver”。邮件发送对象未...
Pod异常问题排查
常见的Pod异常状态及处理方式 Pod状态 Pod含义 解决方案 Pending Pod未被调度到节点上。Pod状态为Pending Init:N/M Pod包含M个Init容器，其中N个已经启动完成。Pod状态为Init:N/M（Init:Error和Init:CrashLoopBackOff）Init:Error Init容器...
性能监控指标
当平均负载持续大于 5.0*CPU 逻辑核数，表明系统已出现严重问题，长时间未响应，或者接近死机。除了关注平均负载值本身，也应关注平均负载的变化趋势，这包含两层含义。一是 load1、load5、load15 之间的变化趋势；二是历史的变化趋势。当 ...
消息 Mesh
这会给连接迁移带来新的问题和挑战：在连接迁移的过程中，如果消息客户端已处理完经过 MOSN 转发的服务端投递消息请求，但是还未回复响应，此时若把连接迁移到新的 MOSN，则新的 MOSN 将收到上述响应，但由于新 MOSN 缺失上下文，无法将该...
Java SDK
修复任务实现类配置错误的情况下会触发Spring Boot的ServeletWebServer停止的逻辑，导致业务进程在，但是Web服务被shutdown问题。修复系统启动变量 user.dir='/'，任务会卡住的问题。客户端 springContext.getBean 报 ...
如何使用Prometheus监控Windows
如果您发现磁盘响应繁忙、响应慢，那么您需要优先查看进程IO量大的进程是否符合预期。进程I/O请求数（Bytes）Major WMI（IODataOperationsPerSec）进程IO请求速率。进程分页文件大小（Bytes）Recommend WMI（PageFileBytes）进程占用分页...
如何使用Prometheus监控Windows
如果您发现磁盘响应繁忙、响应慢，那么您需要优先查看进程IO量大的进程是否符合预期。进程I/O请求数（Bytes）Major WMI（IODataOperationsPerSec）进程IO请求速率。进程分页文件大小（Bytes）Recommend WMI（PageFileBytes）进程占用分页...
SPI参考
0：未识别或已过期；1：识别成功 必须 data.accountId String 用户唯一标示 sessionState=1时必须返回；sessionState=0时可以不返回 data.ttl Integer 身份信息缓存的时间，单位：秒 非必须，默认60秒，该场景不允许为0，必须指定缓存时间 ...
虚拟机场景
暴力模式 否 False 是否开启暴力模式，如果是暴力模式，在OOM发生之后也不会释放之前创建的内存，可能会引起应用进程无响应。时间间隔 否 无 两次OOM异常间的时间间隔，只有在非暴力模式才生效，可以减缓GC的频率，避免因频繁的FullGC导致...
任务实例状态异常
说明 正常调度任务运行需要有多个条件：调度资源、定时时间、上游节点运行状态、正常调度（未被冻结）。上游没有出现以上任何一种状态，整个业务流程均为灰色，说明上游依赖关系变动导致业务流程都被孤立。任务运行必须满足的条件有哪些？...
任务未运行
正常调度任务运行需要有多个条件：调度资源、定时时间、上游节点运行状态、调度属性为正常调度（未被冻结）。序号 状态类型 状态标识 运行流程图 1 运行成功状态 2 未运行状态 3 运行失败状态 4 正在运行状态 5 等待状态 6 暂停/冻结状态 ...
设置Pod故障处理策略
如果ContainerInstanceCreated为False，且reason不是Creating，则表示ECI调度还未成功，需要继续等待。以库存不足创建ECI Pod失败为例，当Pod的故障处理策略为fail-fast时，Pod status condition为ContainerInstanceCreated的示例如下：...
调度参数
FAILED:ODPS-0130161:[1,84]Parse exception-invalid token '$' 报错原因：调度参数未赋值或赋值出现异常。解决办法：检查是否有给调度参数赋值。检查配置的调度参数是否符合要求（详情请参见 调度参数支持的格式）。重要 修改参数配置后需...
使用ack-descheduler组件对Pod进行调度优化
LowNodeUtilization 此策略会找到未充分利用的节点，并尽可能从其他节点上驱逐Pod，以便ack-descheduler重新将这些被驱逐的Pod调度到未充分利用的节点上。该策略的参数可以通过 nodeResourceUtilizationThresholds 字段进行配置。...
kube-scheduler
kube-scheduler是一个控制面组件，负责结合节点资源使用情况和Pod的调度要求将Pod调度到集群的合适节点上。组件介绍 基于Pod申明的Request和节点的Allocatable属性，kube-scheduler可以为调度队列中每个Pod确定其可放置的节点，并保证节点...
概览
如果收到FAILED响应或未返回任何响应，则操作失败。来自自定义资源的所有输出数据都由预签名URL响应返回。template developer可使用Fn:GetAtt函数检索该数据。最佳实践 资源编排ROS之自定义资源（基础篇）通过函数计算（FC）实现复杂逻辑...
场景：节点孤立
当前节点跨工作空间依赖某节点时，若上游节点所在工作空间未开启调度，且当前节点仅依赖该一个上游时，当前节点将变成孤立节点。请找到对应空间负责人开启调度或去除该跨项目节点依赖。开启空间调度，详情请参见 调度设置。中间任务不在补...
附录：调度器插件的常用OpenAPI说明
在此定时检测中，若检测节点未加入调度器，则调度器节点开始执行节点加入调度器（NodeAdd）的操作，反之则表示计算节点已经加入调度器，节点状态为运行中。插件功能说明 说明 以下仅说明需要您自行实现的插件功能。SchedServiceCheck 功能...
批量上传质量规则
也可根据 试跑失败、未试跑、未生效、未配置调度 进行筛选质量规则。② 列表区 为您展示规则配置列表的 对象名称、规则名称、所属数据表/所属数据板块、试跑状态、生效状态、质量负责人、调度类型 信息。生效状态：建议生效规则前先进行...
批量上传质量规则
也可根据 试跑失败、未试跑、未生效、未配置调度 进行筛选质量规则。② 列表区 为您展示规则配置列表的 对象名称、规则名称、所属数据表/所属数据板块、试跑状态、生效状态、质量负责人、调度类型 信息。生效状态：建议生效规则前先进行...
使用Kubernetes默认GPU调度
通过以上方式为业务应用申请的GPU资源，并未在调度器的设备资源账本中统计，有可能造成节点GPU资源的分配情况与调度器设备资源账本中记录的值不一致。调度器仍然会调度某些申请GPU资源的Pod到这个节点上，导致用户业务因为在同一张GPU卡上...
批量创建质量规则
也可根据 试跑失败、未试跑、未生效、未配置调度 进行筛选质量规则。② 列表区 为您展示规则配置列表的 对象名称、规则名称、所属数据表/所属数据板块、试跑状态、生效状态、质量负责人、调度类型 信息。生效状态：建议生效规则前先进行...
批量创建质量规则
也可根据 试跑失败、未试跑、未生效、未配置调度 进行筛选质量规则。② 列表区 为您展示规则配置列表的 对象名称、规则名称、所属数据表/所属数据板块、试跑状态、生效状态、质量负责人、调度类型 信息。生效状态：建议生效规则前先进行...
WAL日志并行回放
Hold List：并行执行框架中，每个子进程调度执行回放子任务所使用的链表。原理介绍 概述 一条WAL日志可能修改多个数据块Block，因此可以使用如下定义来表示WAL日志的回放过程：假设第 i 条WAL日志LSN为 LSN i ，其修改了 m 个数据块，则...
Dataphin的集成任务在调度后运行过程中一直卡住无响应...
问题描述 Dataphin的集成任务在调度后运行过程中一直卡住无响应什么原因。DlinkTransRunner-Dlink Writer.Job[MySQL_1]do init work.obproxy Druid LogFactory,userDefinedLogType=null,logInfo=public ...
使用配置巡检检查集群工作负载
如果未配置的话，Pod有被调度到资源紧张的节点上的风险，可能会出现容器内进程运行缓慢的情况。修改Pod Spec，增加 resources.requests.cpu 字段。示例：cpuLimitsMissing 通过检查Workload的Pod Spec中是否未配置 resources.limits.cpu ...
使用配置巡检功能检查注册集群Workload安全隐患
如果未配置的话，Pod有被调度到资源紧张的节点上的风险，可能会出现容器内进程运行缓慢的情况。修改Pod Spec，增加 resources.requests.cpu 字段。示例：cpuLimitsMissing 通过检查Workload的Pod Spec中是否未配置 resources.limits.cpu ...
什么是EMR Workflow
支持异常告警和通知，保障任务调度的及时响应，详情请参见 安全中心。管理文件。支持可视化创建文件、上传文件等操作，详情请参见 资源中心。相关文档 基本概念 管理调度资源组 工作流快速入门 管理工作流定义 任务类型 参数说明
Linux实例系统总体负载的查询及分析
nice：通过nice改变了进程调度优先级的进程，在用户模式下消耗的CPU时间比例。system：系统模式下消耗的CPU时间比例。iowait：CPU等待磁盘I/O导致空闲状态消耗的时间比例。steal：利用Xen等操作系统虚拟化技术，等待其它虚拟CPU计算占用的...
计算资源
除以上五点外，常见计算资源风险点还有“资源相互影响”、“资源节点崩溃”、“依赖服务异常”、“服务进程无响应”、“数据格式异常”、“证书过期”等。可以使用资源隔离、配额控制、多副本冗余、服务降级、服务熔断、心跳上报、主动探活...
CPU性能优化场景概述
场景 方案选择 性能 ACK节点运行在开启NUMA的弹性裸金属服务器 计算密集性负载 在线业务负载 数据库类型 CPU拓扑感知调度 NUMA负载感知调度 稳定的平均响应时RT（Response Time）。最小化CPU限流。CPU使用率提升。ACK节点运行在弹性裸金属...
查询流量调度策略的信息
ID（即未指定 TrafficQosPolicyId 参数的值），则接口会根据 TransitRouterId、TransitRouterAttachmentId、TrafficQosPolicyName 和 TrafficQosPolicyDescription 参数的值仅返回流量调度策略的信息，并不会查询流量调度策略下队列的信息...
响应编排
威胁分析与响应服务响应编排SOAR(Security Orchestration,Automation and Response)是一种综合性的安全解决方案，通过将不同的系统或服务按照一定的逻辑进行编排连接，实现安全运维的自动化编排和快速响应，旨在加强企业安全防御，提高安全...
- 产品推荐
- 这些文档可能帮助您