工作原理
日志被广泛地应用在系统监控和故障定位中，传统的日志分析手段以分析日志风险等级和匹配关键字为主，例如监控Error级别日志的内容和数量、监控含有Failed、Unsuccessfully等关键词的日志。但是在分布式环境和微服务架构下，以传统的人工...
工作原理
修改调度配置 修改调度配置后，下一个实例按照新配置生成。算法模型会记忆当前消费的时间位置，进而对新来的数据继续巡检。重试失败的实例 如果实例执行失败（例如权限不足、源库不存在、目标库不存在、配置不合法等），系统支持自动重试。...
网络架构容灾
服务中心某IP地址故障后，快速发现并实现隔离，地址恢复后自动添加至解析列表，完全无需人为干预。当某中心故障发生时，快速切流到其他中心，减少中断时间。阿里云全局流量管理（Global Traffic Manager，简称GTM）可以有效解决上面几个...
使用阿里云CDN加速后网站访问速度较慢
因为CDN调度节点是通过客户端的DNS来分配调度，根据客户端IP、DNS以及CDN节点可以判断调度是否异常，通过ping以及mtr的信息截图可以看到网络延迟以及具体延迟在哪个网络链路节点。本节通过两个案例进行介绍。加速区域设置错误 中国内地的...
功能说明
健康检查 针对地址池，可以配置健康检查，开启健康检查是指对地址池中的IP地址配置健康检查，开启后可实现实时监测应用服务的可用性状态，并最终帮助企业实现自动故障隔离和自动故障切换的功效。健康检查支持的方式：ping、tcp、http(s)。...
常见问题
code=exited”错误 启动SSH服务时出现“error while loading shared libraries”错误 ECS网络问题 Windows实例ping外网地址提示“一般故障”Linux系统的ECS中没有禁ping却ping不通的解决方法 使用ping命令测试ECS实例时ping不通的排查方法 ...
应用管理
本文介绍如何通过应用管理功能创建应用（任务分组）、测试该应用的连接机器、为RAM...说明 删除分组后，分组所有关联的任务将不触发，同时页面不显示。误删分组后如果需要恢复，请加入钉群（钉群号：23103656）联系SchedulerX技术支持人员。
工作原理
场景三：修改调度配置 修改调度配置后，下一个实例按照新配置生成。算法模型会记忆当前消费的时间位置，进而对新来的数据继续巡检。场景四：重试失败的实例 如果实例执行失败（例如权限不足、源库不存在、目标库不存在、配置不合法等），...
工作原理
场景三：修改调度配置 修改调度配置后，下一个实例按照新配置生成。算法模型会记忆当前消费的时间位置，进而对新来的数据继续巡检。场景四：重试失败的实例 如果实例执行失败（例如权限不足、源库不存在、目标库不存在、配置不合法等），...
权限管理与规范化数据开发
调度参数 调度参数是DataWorks在调度场景下支持自动根据业务时间替换为具体值的参数，节点中使用调度参数后，在调度场景下，可以实现将对应业务时间的业务数据动态写入对应的时间分区中。详情请参见 调度参数支持的格式。依赖关系 调度依赖...
时间属性配置说明
非调度时间任务会空跑 DataWorks上非每天调度的任务（例如周、月调度的任务）在非调度时间内会 空跑，当到达任务定义的调度时间后立即返回成功状态。若下游存在日调度任务，会调起该下游日调度任务正常执行。即上游空跑，下游调度任务正常...
应用管理
本文介绍如何通过应用管理功能创建应用（任务分组）、测试该应用的连接机器、为RAM...说明 删除分组后，分组所有关联的任务将不触发，同时页面不显示。误删分组后如果需要恢复，请加入钉群（钉群号：23103656）联系SchedulerX技术支持人员。
设置Pod故障处理策略
以库存不足创建ECI Pod失败为例，当Pod的故障处理策略为fail-fast时，Pod status condition为ContainerInstanceCreated的示例如下：说明 如果Pod的故障处理策略为fail-back，Pod创建失败后系统会自动尝试重调度。此时，Pod status.reason...
Hologres开发：周期性调度
HoloStudio与DataWorks无缝连通，您可以通过HoloStudio将MaxCompute数据导入Hologres，并基于DataWorks的底层能力，前往DataWorks进行定时调度，实现周期性导入数据至Hologres。本文为您介绍如何将MaxCompute源表数据导入Hologres进行周期...
创建指标质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
创建指标质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
创建数据表质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
创建数据表质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
FAQs
同时通过健康检查动态更新DNS解析IP列表，实现故障隔离以及故障切换。最终用户的访问直接连接服务的IP地址，并不通过GTM。而 SLB 是通过代理用户访问请求的形式将用户访问请求实时分发到不同的服务器，最终用户的访问流量必须要经过SLB。...
常见问题-FAQ
两者的对比如下表所示：对比项 网络层 后端地址 加权轮询 跨Region难度 故障隔离时间 会话保持 全局流量管理 3层 域名、IP 支持 简单 分钟级 不支持 负载均衡SLB 4层、7层 IP 支持 困难 秒级 支持 全局流量管理（GTM）、云解析DNS有什么...
Windows系统的ECS实例ping外网地址提示“一般故障”...
本文介绍Windows系统的ECS实例ping外网地址提示“一般故障”的错误原因和解决方案。问题现象 Windows系统的ECS实例ping外网地址时提示“一般故障”错误。问题原因 出现该问题可能有以下原因：可能原因 排查方案 ECS实例中安装了第三方杀毒...
本地IDC通过专线访问云服务器ECS
警告 若您选择关闭本功能，请确保您有其他方式保证链路的冗余性，否则当物理专线连接故障后，会导致网络中断。说明 健康检查会以您指定的发包时间间隔发送探测报文，当连续发送的所有探测报文（即您指定的探测报文个数）都丢包时，则判断...
YARN调度器
基础架构&核心流程 CapacityScheduler的主调度流程有三种触发方式：节点心跳驱动（Node-Heartbeat Driven）：是面向节点的局部调度（当调度器收到每个节点心跳时触发，为当前节点选择可调度的应用），受限于心跳间隔时间与接近随机调度，...
订阅常见问题
单击手动发送后，一般间隔3~5秒后，才会触发调度任务。因此，手动发送后，建议3~5秒后再查看日志。邮件订阅时调度状态提示发送周期已设置完成，但是为什么没有收到订阅邮件？调度状态指是否会在周期内执行发送任务，未调度在周期内不会发送...
服务端发布记录
本文介绍分布式任务调度SchedulerX产品发布的功能变更，包括新增功能、功能优化、重要问题修复等，帮助您了解SchedulerX的发布动态。发布记录 2024-02-29 功能名称 变更类型 功能描述 相关文档 Java版本SDK v1.11.1 修复 Netty、Logback等...
ACK集群概述
调度：支持不同弹性资源的混合调度、异构资源的精细化调度、批量计算的任务调度等，提升应用的性能和集群整体资源的利用率。多集群管理：支持线下IDC和多云多区域的集群统一接入实现混合云应用管理。授权管理：支持RAM授权和RBAC权限管理。...
使用插件部署混合云集群
本文介绍如何使用E-HPC插件部署混合云集群，该集群由本地调度器、本地域控和云上计算节点等组成。背景信息 混合云集群是E-HPC提供的一套用于云上计算资源和本地服务之间互通的集群结构，通常由本地调度器、本地域控、云上计算节点、共享...
2022年
企业级分布式批处理方案 1.4.2，2022-03-07 变更类型 功能描述 相关文档 新增 分布式任务调度系统SchedulerX 2.0的日志服务，您不需要修改一行代码，只需要增加一个Log4j或Logback的配置，即可在控制台看到每次任务调度（包括分布式任务）...
配置规则：按表（单表）
若无21天采样记录，您可在配置了动态阈值类规则且规则关联调度任务后，通过 补数据 功能补齐21天采样记录。进入按表配置监控规则页面 进入数据质量页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据...
无法ping通ECS实例公网IP的排查方法
相关文档 无法连接Linux实例的排查方法 无法远程连接Windows实例的排查方法 无法访问ECS实例中的服务的排查方法 Windows系统的ECS实例ping外网地址提示“一般故障”错误怎么办？为什么Windows系统的ECS实例配置辅助私网IP后，无法从ECS实例...
PAI-TF概述
PAI-TF的作业都是基于底层的分布式调度系统动态调度至不同机器。当您提交PAI-TF作业时，无需担心是否需要提前申请GPU物理主机，PAI-TF所需要的GPU资源随作业的提交动态分配，随作业的结束动态释放。全局计算调度 当您在使用MaxCompute计算...
调度设置
若您的任务需要周期性运行，则在配置任务的调度属性前，需先进入DataStudio的调度设置页面开启调度功能，开启后，周期任务的调度配置才会生效。同时，DataWorks支持设置周期任务默认使用的资源组，支持设置任务的默认重跑属性、重跑次数、...
ECS服务器的外网地址ping不通的排查方法
Windows系统：具体操作请参见 Windows实例ping外网地址提示“一般故障”。运营商问题：检查运营商是否存在网络问题，如公网运营商链路中断，路由震荡等。具体操作请参见 使用ping命令丢包或不通时的链路测试方法。相关文档 ECS实例间ping...
配置任务调度
本文以配置任务write_result的调度周期为周调度为例，为您介绍如何设置DataWorks的调度属性和依赖属性。前提条件 已创建虚拟节点（start）和ODPS SQL节点（insert_data，详情请参见 创建业务流程。已创建同步节点 write_result 生成的同步...
节点调度
前提条件 已创建集群 或 已导入集群 暂停调度 节点暂停调度后，在后续进行应用部署时，Pod 不会再调度到该节点。登录控制台，在左侧导航栏单击 集群管理>集群 详情，进入集群列表页。单击目标集群名称，进入该集群的 集群详情 页。单击 ...
可选：运维SQL分析任务
SQL分析任务上线后，您可以查看SQL分析任务的基本信息和配置情况，以及SQL分析任务的调度情况。本文介绍运维SQL分析任务的操作步骤。前提条件 已配置并发布SQL分析任务，具体操作，请参见 步骤三：设置任务调度策略并发布。背景信息 SQL...
Quick BI v4.3版本说明
支持多种调度方式，包括手动调度，周期调度和动态参数调度。支持任务发布状态管理和运维管理。移动端 移动端图表展示支持栅格布局，一行可放置多个图表。支持布局缩放来调整单个组件尺寸和位置。支持布局个性化隐藏Tab内的单个图表。可视化...
使用负载感知调度
ACK集群Pro版 调度器的负载感知调度功能会根据节点的实际负载情况，将Pod优先调度到负载较低的节点，以实现节点负载均衡，降低节点故障风险。前提条件 已安装ack-koordinator组件，且版本为1.1.1-ack.1及以上。具体操作，请参见 ack-...
常见问题
调度 Pod显示已调度至virtual-kubelet，但一直未成功，怎么办？ACK+Virtual Node的场景下，kube-proxy、coredns被调度到了虚拟节点，启动失败怎么办？网络 如何修改ECI Pod的ClusterDomain？在ACK Serverless集群的Ingress中设置了鉴权，但...
访问策略配置
⑥ 备地址池集合：指由多个地址池组合而成，一般当主地址池集合故障时会切换访问的地址池集合。说明 访问策略中的负载均衡策略优先级高于地址池中的负载均衡策略。如下：地址池负载均衡策略 访问策略负载均衡策略 最终生效策略 返回全部...
- 产品推荐
- 这些文档可能帮助您