计算任务概述
计算任务页面概述 计算任务页面主要由计算任务目录、工具栏、编辑器、配置及管理、控制台组成。您可以在计算任务页面对计算任务进行创建、管理以及配置操作。区域 描述 ① 计算任务目录 创建的计算任务将在任务目录中进行统一管理。任务...
计算任务概述
计算任务页面概述 计算任务页面主要由计算任务目录、工具栏、编辑器、配置及管理、控制台组成。您可以在计算任务页面对计算任务进行创建、管理以及配置操作。区域 描述 ① 计算任务目录 创建的计算任务将在任务目录中进行统一管理。任务...
报警任务概述
定时任务可以在您指定的时间执行您指定的伸缩规则，当业务场景在时间上可预料时，能够提前创建定时任务，更多信息，请参见 定时任务概述。但是，在面对突发或者时间上不可预料的业务场景下，定时任务就难以满足业务需求，相比较定时任务的...
补数据任务概述
Dataphin补数据任务可以对历史数据进行补数，将数据写入至对应时间分区。代码中若使用调度参数，则该参数将根据补数据时选择的业务日期自动替换为具体值，结合业务代码将对应时间数据写入对应分区。帮助您对数据中缺失、错误、重复或不完整...
AI任务概述
AI任务类型 描述 参考文档 模型训练 您可以通过Arena提交TensorFlow的单机训练任务和分布式训练任务、PyTorch的单机训练任务和分布式训练任务、弹性模型训练任务等。TensorFlow单机训练 TensorFlow分布式训练 PyTorch单机训练 PyTorch分布...
API任务概述
Dataphin支持通过直连数据源模式、逻辑表API-SQL模式、逻辑表API-向导模式、注册API和五种方式创建API，不同任务对应不同的用途，本文为您简要说明API任务的不同用途。任务名称 任务用途 任务链接 通过直连数据源模式创建API 直连数据源...
设备任务概述
物联网平台支持设备任务功能，可同时向多个设备发起属性设置、异步服务调用、消息发送和自定义的任务。本文介绍设备任务的使用及流程。使用说明 物联网平台的设备任务，是按照已定义的JSON格式的规则文件，在设备端实现对应的任务功能。...
定时任务概述
6#3 每月第三个星期六18:15执行任务 如何配置定时任务 配置定时任务的相关文档如下所示：控制台文档 操作项 API文档 配置定时任务 创建定时任务 CreateScheduledTask 修改定时任务 ModifyScheduledTask 启用定时任务 无 停用定时任务 无 ...
补数据任务概述
Dataphin补数据任务可以对历史数据进行补数，将数据写入至对应时间分区。代码中若使用调度参数，则该参数将根据补数据时选择的业务日期自动替换为具体值，结合业务代码将对应时间数据写入对应分区。帮助您对数据中缺失、错误、重复或不完整...
营销动作子任务概述
自动化营销任务中的每个营销动作节点（生成受众节点除外），每执行一次都将生成一个营销动作子任务。您可以在自动化营销任务的 任务详情>营销动作 页签，查看该自动化营销任务的营销动作子任务的执行信息。页面分不同页签展示各类型营销...
分布式任务调度概述
本文介绍分布式任务调度基本信息。
离线任务监控概述
离线任务监控功能支持您通过配置监控规则实现对离线任务的运行状态进行监控。在离线任务触发所配置的监控规则时，系统将根据所配置的接收人发送报警，以协助您 保障 任务的正常运行和数据的产出。功能介绍 离线任务中支持对Basic项目或者...
任务管理概述
数据访问代理会通过触发 DDL 任务来进行数据库与数据表的管理操作，比如创建、删除数据库，创建、删除数据表等。这些 DDL 任务既可以在创建物理分库前由数据访问代理自动触发，也可以由您在创建数据表时通过传入 SQL 文件或者直接输入 DDL ...
离线任务监控概述
离线任务监控功能支持您通过配置监控规则实现对离线任务的运行状态进行监控。在离线任务触发所配置的监控规则时，系统将根据所配置的接收人发送报警，以协助您 保障 任务的正常运行和数据的产出。功能介绍 离线任务中支持对Basic项目或者...
任务型实例概述
关于三种实例的具体差异，请参见 ACS Pod实例概述。弹性算力 任务型实例使用的vCPU与宿主机节点的物理CPU并不是严格绑定的，实例进程在运行过程中会被随机调度到任何空闲的vCPU超线程上，不同类型实例的vCPU会分时共享物理CPU资源，在宿...
离线任务属性配置概述
对于离线任务，若需要周期性调度运行，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度参数等。本文为您介绍离线任务属性与调度的相关内容。...后续可在生产环境进行任务的相关运维操作，详情请参见 运维中心概述。
周期任务通用运维概述
周期任务是指调度系统按照调度配置自动定时运行的任务。本文为您介绍周期的脚本任务、明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）任务的通用功能，包括使用说明，支持的调度类型和相关功能说明。使用说明 仅生产环境运维中心支持...
离线任务属性配置概述
对于离线任务，若需要周期性调度运行，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度参数等。本文为您介绍离线任务属性与调度的相关内容。...后续可在生产环境进行任务的相关运维操作，详情请参见 运维中心概述。
周期任务通用运维概述
周期任务是指调度系统按照调度配置自动定时运行的任务。本文为您介绍周期的脚本任务、明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）任务的通用功能，包括使用说明，支持的调度类型和相关功能说明。使用说明 仅生产环境运维中心支持...
离线集成任务属性配置概述
对于离线集成任务，若需要周期性调度运行，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度参数等。本文为您介绍离线任务属性与调度的相关内容。注意事项 系统仅支持 调度类型 为 周期性节点 的离线集成任务进行调度配置。...
离线集成任务属性配置概述
对于离线集成任务，若需要周期性调度运行，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度参数等。本文为您介绍离线任务属性与调度的相关内容。注意事项 系统仅支持 调度类型 为 周期性节点 的离线集成任务进行调度配置。...
任务调度属性配置概述
若任务需要周期性调度运行，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度参数等。本文为您介绍调度配置的相关内容。前提条件 已创建节点。DataWorks基于节点进行任务开发，不同类型的引擎任务在DataWorks上被封装为不同...
概述
背景信息 物联网平台设备任务功能的更多信息，请参见 设备任务概述。设备任务的Alink数据格式，请参见 设备任务。设备任务包括属性设置、异步服务调用和自定义任务，本文介绍设备接收自定义任务。属性设置和异步服务调用任务的实现方法，可...
使用流程
报警任务基于云监控的监控项动态管理伸缩组内ECS实例或ECI实例，更多信息，请参见 报警任务概述。相关文档 如果您是RAM用户，首次使用弹性伸缩服务时，需要创建弹性伸缩的服务关联角色（AliyunServiceRoleForAutoScaling）。具体操作，请...
配置定时任务
更多信息，请参见 定时任务概述。创建定时任务 一个账号下可以创建的定时任务数量有限，单个地域下的定时任务数量和弹性伸缩使用情况有关，请前往 配额中心 查看配额值。登录 弹性伸缩控制台。在左侧导航栏中，选择 自动触发任务管理>定时...
基本概念
配置定时任务 报警任务概述 伸缩活动 伸缩活动用于记录伸缩组内实例数、伸缩组边界值、期望实例数等数量的变化情况。执行伸缩规则、修改伸缩组边界值、修改期望实例数等操作均会触发伸缩活动。查看伸缩活动详情 期望实例数 为伸缩组开启...
设备任务
设备任务运行流程，请参见 设备任务概述。设备任务配置和管理操作，请参见 添加自定义任务、添加属性设置任务、添加服务调用任务。设备任务状态更新通知 说明 仅当设备任务状态为执行中、取消和删除时，向设备下发通知。下行。Topic：/sys/...
创建EMR Spark节点
Spark是一个通用的大数据分析引擎，具有高性能、易用和普遍性等特点（Spark概述），可用于进行复杂的内存分析，构建大型、低延迟的数据分析应用。DataWorks为您提供EMR Spark...相关文档 Spark对接MaxCompute MaxCompute的Spark多引擎任务概述
DataWorks On CDP/CDH使用说明
任务调度属性配置概述 任务调试流程 发布任务 批量操作 流程管控 运维中心 运维中心是一站式大数据运维、监控平台，支持实时查看任务的运行状态，并为异常任务提供智能诊断、重跑等运维操作。它提供智能基线功能，帮助您解决重要任务产出...
DataWorks On Hologres使用说明
任务调度属性配置概述 任务调试流程 发布任务 批量操作 流程管控 运维中心 运维中心是一站式大数据运维、监控平台，支持实时查看任务的运行状态，并为异常任务提供智能诊断、重跑等运维操作。它提供智能基线功能，帮助您解决重要任务产出...
API概览
数据开发 API 标题 API概述 任务编排 任务编排 UpdateTaskFlowConstants 更新任务流常量列表 调用UpdateTaskFlowConstants接口，更新任务流常量列表。DeleteTaskFlow 删除任务流 调用DeleteTaskFlow接口，删除任务流。OfflineTaskFlow 下线...
DataWorks On MaxCompute使用说明
任务调度属性配置概述 任务调试流程 发布任务 批量操作 流程管控 运维中心 运维中心是一站式大数据运维、监控平台，支持实时查看任务的运行状态，并为异常任务提供智能诊断、重跑等运维操作。它提供智能基线功能，帮助您解决重要任务产出...
DMS调度Spark
使用常规的Spark开发编辑器或命令行等工具进行Spark作业开发时，仅支持单次调度Spark作业，且作业间无依赖关系和执行顺序。为解决以上痛点，您可以通过 数据管理DMS 的任务编排功能，周期性、有顺序地调度Spark作业。...相关文档 任务编排概述
配置AnalyticDB MySQL Spark节点
数据管理DMS 任务编排功能的AnalyticDB MySQL Spark节点，支持周期性、有顺序地调度Spark作业。本文介绍如何配置AnalyticDB MySQL Spark节点。背景信息 使用常规的Spark开发编辑器或命令行等工具进行...相关文档 任务编排概述 基本概念
API概览
标注任务 API 标题 API概述 ListTasks 任务列表查询 展示当前租户标注任务列表。CreateTask 新增任务 为当前租户新增标注任务。GetTask 单个任务信息 查询单个标注任务信息。UpdateTask 修改任务 修改当前租户下的任务。DeleteTask 删除...
产品相关问题
任务调度适用于什么场景？解决大规模分布式任务统一调度的问题，助力企业能够更加迅速地满足业务需求。典型的应用场景包括金融行业结息处理、日切处理、余额缓冲记账、政务数据批处理等。任务调度支持哪些任务类型？任务调度支持的基本任务...
任务编排
本文介绍如何使用 数据管理DMS 任务编排的单实例SQL节点，将源表中6个月前的数据（历史数据）迁移（归档）至目标表中，并删除源表中已迁移的数据。应用场景 DMS 的任务编排功能...相关文档 任务编排概述 基本概念 变量概述 发布或下线任务流
数仓开发任务流
更多信息，请参见 任务编排概述。管理任务流数仓表 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>数据开发>数仓开发。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>集成与开发（DTS）>...
查看并管理脚本任务
配置监控报警 支持配置任务运行的监控规则，详情请参见 离线任务监控概述。说明 仅适用于Prod和Basic项目。脚本任务DAG节点支持的操作 DAG图清晰地为您展示任务节点的上下游依赖关系，同时系统支持对上下游节点进行运维和管理。DAG图默认...
- 产品推荐
- 这些文档可能帮助您