任务导入
当需要一次创建较多任务的时候，可以使用「导入任务」功能。当项目内有多个任务类型的时候，导入任务还可以在选择对应任务类型之后，按所选不同任务类型导入。一、选择任务类型，下载导入模板 点击任务面板右上角的三个点，在打开的菜单中...
执行补数据并查看补数据实例（新版）
搜索任务 通过名称或ID搜索，添加一个起始任务，以及一个或多个结束任务，平台将根据起始及结束任务分析中间任务（即中间任务为起始任务的直接或间接下游任务，为结束任务的直接或间接上游任务）。中间任务列表 平台根据起始任务及结束任务...
智能基线概述
如上图所示，假设整个DataWorks有6个任务节点，任务D和任务E是基线上的任务，则影响任务D和任务E数据产出的上游任务，即上图中的任务A、任务B、任务D和任务E，均会被纳入监控范围，监控范围内的任务出现异常（出错或变慢），均会被智能基线...
TSDB全量迁移至时序引擎
说明 时序数据迁移工具支持多任务协同迁移，每个迁移任务的ID记录在任务ID列表中，只有当一个时间分组内所有的子读任务迁移完成，才会开始下一个时间分组的迁移工作。写入端收到子读任务转发的数据后，使用多值数据写入方式将数据写入到...
开发流程
创建表 导入数据 通用数据开发 ② Designer 支持大规模分布式的传统机器学习、深度学习、强化学习训练，支持流批一体训练，该子模块封装了上百种机器学习算法，您可以拖拽式建模、自动调参，从而无编程玩转人工智能。Designer概述 ③ ...
执行补数据并查看补数据实例（旧版）
如需对该任务的多个不连续的时间段补数据，可单击 添加多段业务日期，配置多个时间段。当 业务日期 晚于当前日期，可选择 立即运行定时时间大于此刻的补数据实例，后续当实际时间大于配置的 业务日期 时，平台会立即运行该补数据实例。例如...
运维中心概述
运维中心包括运维大屏、实时任务运维、周期任务运维、手动任务运维、智能监控、智能诊断、资源运维和引擎运维功能模块，为您提供任务操作与状态、引擎、资源等多方位的运维能力。运维中心功能模块 当您在DataStudio中完成节点开发，并提交...
运行失败
在seek阶段M-R1-R2的R1到R2的过程，会将这些数据交给同样的Reducer去执行，导致数据倾斜，造成某个Reduce Job挂掉。小类目检索准备阶段GetSmallCategoryDocNum为空 报错信息 解决方法 该问题的主要原因是表当中某些字段的值为空，比如 ...
XxlJob任务
高可用 SchedulerX 2.0采用高可用架构，任务多备份机制，经历过阿里集团多年双十一、容灾演练等场景的考验，可以做到整个集群挂掉任意2个节点或者任意一个机房断电，任务调度都不会受到影响。商业化报警运维 SchedulerX 2.0除了兼容XXL-JOB...
XxlJob任务
高可用 SchedulerX 2.0采用高可用架构，任务多备份机制，经历过阿里集团多年双十一、容灾演练等场景的考验，可以做到整个集群挂掉任意2个节点或者任意一个机房断电，任务调度都不会受到影响。商业化报警运维 SchedulerX 2.0除了兼容XXL-JOB...
XxlJob任务
高可用 SchedulerX 2.0采用高可用架构，任务多备份机制，经历过阿里集团多年双十一、容灾演练等场景的考验，可以做到整个集群挂掉任意2个节点或者任意一个机房断电，任务调度都不会受到影响。商业化报警运维 SchedulerX 2.0除了兼容XXL-JOB...
行为模型学习配置
结束或重新学习 只有结束行为模型的学习任务后，数据库审计系统才会根据学习生成的规则检查该资产新产生的审计日志，如果数据库审计系统检测到的操作和学习到的规则不一致，则按照学习任务定义的规则产生相应告警。处于学习中状态的学习...
异步任务管理接口和设置
如果任务失败或者部分失败，在 output 中根据不同的任务也会输出响应的 code 和 message 信息指明失败的原因，对于有的任务包含多个子任务，有可能会分别有多个成功和失败的任务。output.task_id String 查询任务的 task_id a8532587-xxxx-...
专业版公测（2022年01月26日）
阿里巴巴分布式任务调度平台SchedulerX 2.0的专业版于2022年01月26正式公测，本次公测带来了全新的可视化功能，兼容开源XXL-JOB任务，支持一次性任务，融合大数据DataWorks任务。可视化 日志服务 在当前微服务和容器化越来越流行的情况下，...
文档更新动态（2022年）
新增说明 创建并配置机器学习任务 2022年03月03日 支持PAI Designer任务的运维与监控 运维中心的细分类型新增PAI_DESIGNER，同时支持对PAI Designer任务配置监控报警规则。更新说明 周期任务通用说明 手动任务 周期实例通用说明 手动实例 ...
计算资源
任务重复执行 由于各种原因导致计算任务被多次执行的情况，如重复操作、消息重复、调度重复等原因。常见的容错策略如下：去重：可以使用唯一标识符来标识任务，检查任务是否已经在系统中存在。如果任务已经存在，则不再重复执行，而是直接...
专业版公测（2022年01月26日）
阿里巴巴分布式任务调度平台SchedulerX 2.0的专业版于2022年01月26正式公测，本次公测带来了全新的可视化功能，兼容开源XXL-JOB任务，支持一次性任务，融合大数据DataWorks任务。可视化 日志服务 在当前微服务和容器化越来越流行的情况下，...
执行测试并查看测试实例
测试实例是对周期任务进行测试时产生的实例，您可以在测试实例界面，通过列表及DAG图的方式快速查看实例的详细信息。...任务运行问题定位 如果任务运行不符合预期，您可以通过 运行诊断 功能，诊断任务未运行的原因或存在的问题。
常见问题
任务运行中卡住怎么办？如何排查任务运行慢的原因？任务运行实例达到上限怎么办？任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何...
索引
任务运行中卡住怎么办？如何排查任务运行慢的原因？任务运行实例达到上限怎么办？任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何...
常见问题
任务运行中卡住怎么办？如何排查任务运行慢的原因？任务运行实例达到上限怎么办？任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何...
常见问题
任务运行中卡住怎么办？如何排查任务运行慢的原因？任务运行实例达到上限怎么办？任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何...
配置任务常见错误码及排查方法
本文介绍了用户在使用控制台或OpenAPI配置任务时系统返回的错误码、出现报错的场景及解决方法。用户配置使用类错误码 错误码 报错场景 原因及解决方法 DTS.Msg.LXCreateOrderError 购买DTS实例时创建订单不成功。原因：未将UID添加至白名单...
索引
任务运行中卡住怎么办？如何排查任务运行慢的原因？任务运行实例达到上限怎么办？任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何...
索引
任务运行中卡住怎么办？如何排查任务运行慢的原因？任务运行实例达到上限怎么办？任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何...
查看并管理手动任务
手动任务是已提交至运维中心，且调度类型为手动节点的任务。手动任务不会自动运行，只有手动触发运行才会生成实例。本文为您介绍手动任务运维功能。手动任务页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照...
手动任务快速入门
本文以SHELL任务类型为...常见问题 报错“The bucket you access does not belong to you”问题 相关文档 更多任务类型的详细信息，请参见 任务类型。手动任务相关的操作，请参见 管理手动任务。如需新购调度资源组，请参见 管理调度资源组。
查看并管理手动任务
手动任务是已提交至运维中心，且调度类型为手动节点的任务。手动任务不会自动运行，只有手动触发运行才会生成实例。本文为您介绍手动任务运维功能。手动任务页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照...
常见报错
本文介绍配置任务和任务运行时系统返回的报错信息（如重试信息或错误码）以及解决方法。说明 本文以正则表达式（(.*)?的形式表示报错信息中的变量。若报错无法解决，您可以 通过钉钉（钉钉通讯客户端下载地址）进入到DTS客户交流钉钉群...
修复迁移失败的任务
当您的数据迁移任务在结构迁移阶段或全量数据迁移阶段，出现 迁移失败 的提示时，您可以使用DTS的在线修复功能手动修复该任务。修复结构迁移失败的任务 DTS支持异构数据源之间的迁移，对于一些不支持的数据类型，在进行结构迁移时，如果...
如何修复异常DBS备份计划
场景及解决方案 注意事项 若您已确定任务异常的原因，并已成功解决了问题，那么您可以选择单击 重新启动 来进行修复。例如备份异常是由于源实例停机导致的，您可以在启动源实例后尝试重启异常任务以解决问题。如果您正在进行全量备份，在...
任务触发与执行问题
问题原因 任务拓扑的判断条件中，指定的自定义参数不存在。解决方法 检查判断条件与任务拓扑配置中的自定义参数列表是否匹配，并更正。客户端未注册到服务端 问题现象 出现如下报错：no targets was found target zone is null no ...
可选：运维SQL分析任务
SQL分析任务上线后，您可以查看SQL分析任务的基本信息和配置情况，以及SQL分析任务的调度情况。本文介绍运维SQL分析任务的操作步骤。前提条件 已配置并发布SQL分析任务，具体操作，请参见 步骤三：设置任务调度策略并发布。背景信息 SQL...
任务菜单
除了任务内容的编辑与修改外，在任务面板右上角的下拉菜单中，可以选择对任务的更多操作。如果打开的下拉菜单中没有显示如图的所有操作，说明该操作需要项目管理员、拥有者、相应自定义角色或任务创建者才可进行，请联系有权限的同事协助...
如何指定标签
本文介绍如何为任务指定标签。应用场景 主要应用在灰度、压测等场景。同一个应用分组下的机器，部分机器可能要用于灰度或者压测，任务实现类和线上其他机器不一致。任务调度时，机器被随机分配，所以灰度任务被分配到正常机器时，可能无法...
全球消息路由
在 全球消息路由 页面的任务列表中，选中需要批量启停的多个任务，单击列表上方的 批量启用规则 或 批量停用规则，然后在弹出的 提示 对话框中的单击 确认。批量启用规则后，所有被选中的任务的状态会切换至 已启用。批量停用任务后，所有...
联邦模型管理
关联任务 在联邦模型的 关联任务 页签下，可以查看该模型关联的脚本执行任务、任务发起时间和任务结束时间，以及下游任务的相关信息。单击任务名称，即可查看该任务的相关信息，包括执行日志、执行结果和发起的脚本等相关信息，关于任务的...
数据开发概述
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
基线监控概述
将任务或明细汇总表字段添加到基线监控的保障对象后，基线监控 能够及时捕捉导致基线上的任务无法按时完成的异常情况并提前预警，保障复杂依赖场景下重要数据能在预期时间内顺利产出，帮助您降低运维成本、避免无效报警、自动监控所有重要...
基线监控概述
将任务或明细汇总表字段添加到基线监控的保障对象后，基线监控 能够及时捕捉导致基线上的任务无法按时完成的异常情况并提前预警，保障复杂依赖场景下重要数据能在预期时间内顺利产出，帮助您降低运维成本、避免无效报警、自动监控所有重要...
- 产品推荐
- 这些文档可能帮助您