2019年
分布式任务，根任务失败，无法看到失败原因。并行任务子任务列表不能重试子任务。无 1.0.6-compatible，2019-07-02 变更类型 功能描述 相关文档 优化 兼容 schedulerx1.0(DTS)接口的兼容版本。不支持同时依赖 schedulerx-client 和 ...
Java SDK
本文介绍SchedulerX产品的Java SDK发布的功能变更，包括新增...分布式任务，根任务失败，无法看到失败原因。并行任务子任务列表不能重试子任务。无 1.0.6-compatible，2019-07-02 变更类型 功能描述 相关文档 优化 兼容 schedulerx1.0(DTS)...
历史记录
分布式任务，根任务失败，无法看到失败原因。并行任务子任务列表不能重试子任务。1.0.6-compatible，2019-07-02 优化：兼容 schedulerx1.0(DTS)接口的兼容版本。不支持同时依赖 schedulerx-client 和 schedulerx-worker 两个包，只能依赖 ...
更新故障复盘改进详情
problemReason":"故障原因A","recentActivity":"2","injectionMode":"1","recoveryMode":"2","discoverSource":1,"userReport":10,"monitorSourceName":"Zabbix","relationChanges":"关联变更","dutyUserId":1231,"replayDutyUserId":1213...
常见问题
实际的任务并行度参照如下的计算公式 concurrent_num=Min(Min(partition_num,Min(desired_concurrent_num,alive_be_num)),Config.max_routine_load_task_concurrent_num)。max_batch_interval properties 10s Routine Load任务调度周期。...
如何解决MSE Nacos实例域名无法解析的问题？
如果使用的是ACK，请 提工单 联系ACK技术支持协助排查CoreDNS故障原因。方案二：使用ping命令 使用 ping${mse.nacos.host} 指令尝试解析。如果提示 unknown host，则无法解析域名。如果提示 PING${mse.nacos.host}(xxx.xx.xx.xx)56(84)...
迁移方案
通常，建议您采用迁移新任务和原有任务并行双跑的方式，在新运行一段时间，满足数据对比条件后，验证新任务和原有任务的数据产出是否一致，达到预期的数据质量。理想情况下，迁移的新任务数据产出和原任务完全一致，就无需进行额外的差异...
导入结构和数据
最大支持 5 个导入任务并行运行，后续任务在队列中等待运行。导入任务涉及的文件默认保留 14 天。在 ODC V4.1.0 之后的版本，针对 OceanBase 数据源，配置 sys 租户账号可以提升导入速度。新建导入任务 示例：将本地磁盘中表 employee 和 ...
导出结构和数据
最大支持 5 个导出任务并行运行，后续任务在队列中等待运行。导出任务涉及的文件默认保留 14 天。在 ODC V4.1.0 之后版本，针对 OceanBase 数据源，配置 sys 租户账号可以提升导出速度。同时导出除表、视图之外的其它对象时不再要求必须...
诊断网页加载过慢的问题
慢加载详情 页面顶部的 页面信息 区域展示了本次访问的客户端IP地址、浏览器、操作系统等信息，帮助您确认故障原因。慢加载详情 页面的 页面资源加载瀑布图 区域展示了页面静态资源加载的瀑布图，帮助您快速定位资源加载的性能瓶颈。慢加载...
故障止损恢复
故障初因定位 集成企业内部可利用的所有稳定性相关数据（变更事件，...通用垂直专项快恢能力：通过集成包括DB侧慢SQL限流、变更极速回滚、多活容灾切流快恢等通用的快恢能力，结合监控、日志等数据自动定位的故障原因进行对应的快恢方式推荐。
Java任务
MapReduce：常规MapReduce模型任务，支持超大数量的子任务并行处理，仅可查询子任务运行汇总信息，建议子任务在100万以下时选择。分片运行：包括静态分片和动态分批，用于处理大数据业务需求。单机 和 广播 需要实现JavaProcessor；可视化...
任务管理
MapReduce：属于常规MapReduce模型任务，能支持超大数量的子任务并行处理，仅可查询子任务运行汇总信息，建议子任务100W以下时选择。分片运行：类似elastic-job模型，配置分片参数，可以将分片平均分给多个客户端执行。支持多语言版本。...
任务管理
MapReduce：属于常规MapReduce模型任务，能支持超大数量的子任务并行处理，仅可查询子任务运行汇总信息，建议子任务100W以下时选择。分片运行：类似elastic-job模型，配置分片参数，可以将分片平均分给多个客户端执行。支持多语言版本。...
Java任务
MapReduce：常规MapReduce模型任务，支持超大数量的子任务并行处理，仅可查询子任务运行汇总信息，建议子任务在100万以下时选择。分片运行：包括静态分片和动态分批，用于处理大数据业务需求。单机 和 广播 需要实现JavaProcessor；可视化...
Java任务
MapReduce：常规MapReduce模型任务，支持超大数量的子任务并行处理，仅可查询子任务运行汇总信息，建议子任务在100万以下时选择。分片运行：包括静态分片和动态分批，用于处理大数据业务需求。单机 和 广播 需要实现JavaProcessor；可视化...
识别规则及识别方式
调度任务并行度 用于控制同时扫描的资产对象数量，默认为16，支持配置1~100的正整数。说明 增大并行度可加快扫描进度，但会占用更多的集群计算资源，请您根据业务需求进行合理配置。调度黑名单 默认关闭，开启后，可以设置调度黑名单，在...
迁移方案
通常，建议您采用迁移新任务和原有任务并行双跑的方式，在新运行一段时间，满足数据对比条件后，验证新任务和原有任务的数据产出是否一致，达到预期的数据质量。理想情况下，迁移的新任务数据产出和原任务完全一致，就无需进行额外的差异...
什么是故障
包括根因检查点（如故障原因、最近活动、注入方式、恢复方式等）、故障变更检查、监控检查，并需要对每一个故障明确责任人及团队；故障改进：支持对故障制定明确的改进及验收措施、责任人及完成时间，确保每个深度复盘后的故障都能对业务...
任务管理
MapReduce：属于常规MapReduce模型任务，能支持超大数量的子任务并行处理，仅可查询子任务运行汇总信息，建议子任务100W以下时选择。分片运行：类似elastic-job模型，配置分片参数，可以将分片平均分给多个客户端执行。支持多语言版本。...
如何管理故障
可对故障根因进行原因检查并结构化录入，检查点包括：故障原因、最近活动、注入方式、恢复方式等；关联故障期间的故障变更，新增故障改进措施等操作。故障状态 处理中：处理中仍未恢复的故障；已恢复：故障对处理中的故障做 恢复 操作后是...
故障复盘改进详情
0c4840fd3812 幂等校验token 返回数据 名称 类型 示例值 描述 requestId String 4361a0e1-6747-4834-96ce-0c4840fd3811 Id of the request data Object data problemId String 231231 故障ID problemReason String 故障的原因 故障原因 ...
识别规则及识别方式
调度任务并行度 用于控制同时扫描的资产对象数量，默认为16，支持配置1~100的正整数。说明 增大并行度可加快扫描进度，但会占用更多的集群计算资源，请您根据业务需求进行合理配置。调度黑名单 默认关闭，开启后，可以设置调度黑名单，在...
什么是消息演练
随着应用规模的扩大，系统变得越来越复杂，不可避免地会走向分布式化。各种中间组件会相继被引入系统，其中分布式消息服务更是系统中必不可少的一...需要注意的是演练场景仅是组件表象，其内部故障原因可能是多种多样的，需要进一步进行分析。
流水线任务 jobs
如：jobs:my_job:name:我的任务 runsOn:public/cn-beijing stages.<stage_id>.jobs.<job_id>.needs非必填，默认一个阶段内的所有任务并行执行。若任务间有依赖关系，可通过 needs 描述阶段内的任务依赖关系。注意：needs 支持跨阶段的任务...
故障管理
包括根因检查点（如故障原因、最近活动、注入方式、恢复方式等）、故障变更检查、监控检查，并需要对每一个故障明确责任人及团队；故障改进：支持对故障制定明确的改进及验收措施、责任人及完成时间，确保每个深度复盘后的故障都能对业务...
监控报警概述
故障预警 云电脑的故障信息、故障原因及故障时间等信息。使用场景 在日常业务运行的过程中，监控大盘帮助您及时了解账号下全部云电脑资源的全局情况，实时监控提供更详细的数据指标和故障预警信息，帮助您了解终端用户使用云电脑的情况，...
故障复盘
复盘文档一般包含以下内容：故障简述：故障概述、影响面、处理人等 故障背景：故障发生时的业务链路 故障时间线：着重强调故障引入、故障发生、故障发现、业务响应、恢复执行、故障恢复几个时间点 故障原因分析：建议先一句话总结，再进行...
并发数和构建时长
计费规则 流水线是由多个任务组成，而一个任务则是由多个步骤组成 如下图所示，该流水线包含两个任务：Java 构建上传 主机部署 而”Java 构建上传”任务包含两个步骤：Java 构建 构建物上传 Flow 根据 任务 的运行状态来统计企业并发数和...
自定义流水线阶段
自定义阶段和 构建应用 阶段也可添加并行任务，自定义并行任务。在流水线中，选择需要自定义阶段的位置，单击，打开 阶段配置 对话框。在 阶段配置 对话框中，配置相关参数。参数名称 子参数名称 参数说明 阶段名称-构建阶段标题名称。超时...
Hive数据导入
并行任务数 默认并行任务数为1，并行任务数上限为8。调高该值后，会同时启动多个迁移任务，每个任务迁移一张表。但是每个任务至少需要4 ACU，如果ACU数较少，则迁移任务将串行执行。高级配置 高级配置可以让您对同步任务进行个性化的配置。...
快速开始
records_threshold_for_mpp 若查询语句中存在扫描记录超过该阈值的表，优化器会考虑将单机并行弹性扩展为多机并行，将并行任务调度到多个节点上同时完成计算。默认值为records_threshold_for_parallelism的N倍，N值为当前集群地址内的节点...
湖仓版作业调度
云原生数据仓库AnalyticDB MySQL版 湖仓版（3.0）的作业调度提供离线SQL应用、Spark应用的复杂任务流功能，具备灵活的ETL数据处理、数据开发等能力。使用流程 前提条件 如果通过阿里云账号（主账号）登录，使用作业调度功能需要满足以下两...
EMR Kafka磁盘故障运维
当出现磁盘故障时，需要根据故障原因、故障影响程度、业务需求（是否接受数据丢失、是否允许服务较长时间不可用）、集群状态等综合考虑恢复采取的策略。如果业务优先保证服务可用，但允许丢失部分数据，则应考虑在可能会丢失数据的情况下，...
计费说明
最大并行任务数弹性伸缩，运行时长不限。制品仓库 容量不限 容量不限 专属功能 无 效能洞察、代码安全、研发流程、变更/变更集等 说明 基础与专属功能列表参见 基础/高级版功能说明。对于专属功能，成员状态是“使用中”的用户（主账号用户...
任务触发与执行问题
问题原因 任务拓扑的判断条件中，指定的自定义参数不存在。解决方法 检查判断条件与任务拓扑配置中的自定义参数列表是否匹配，并更正。客户端未注册到服务端 问题现象 出现如下报错：no targets was found target zone is null no ...
管理任务
最近运行状态 运行状态根据最近一次任务的运行情况来定义，包含待运行、运行中、运行成功、运行失败、手动终止、未运行（-），其中：待运行：出现并行任务时，排队中的任务状态显示为待运行。手动终止：当任务在待运行或运行中时，通过单击...
GetJobInfo-获取指定Jobid任务详情
获取指定Jobid任务详情，通常用来更新任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 调试 授权信息 当前API暂无授权信息透出。请求参数 名称 ...
应用场景
云工作流（CloudFlow）用于协调分布式应用和微服务以构建复杂多步骤的、异步调用任务以及长时间运行的业务流程。事务型业务流程编排 复杂的业务场景如电商网站、酒店和机票预定等应用通常要访问多个远程服务，并且对操作事务性语义（即所有...
矢量金字塔
指定构建矢量金字塔的并行任务数，默认为0（表示并行最大化）。并行任务数最大不应该超过CPU数量的4倍。并行构建使用了两阶段事务机制，需要设置数据库max_prepared_transactions参数，需要设置max_prepared_transactions=100或者更高，...
- 产品推荐
- 这些文档可能帮助您