如何修复异常DBS备份计划
问题原因 DBS备份计划状态显示异常，表示该DBS备份计划下至少存在一个异常任务，通常可能是全量备份任务异常或增量备份任务异常，也可能是其他类型任务出现异常。说明 任务出现异常时，DBS不会直接启动异常任务，以免影响客户业务。为了...
合理配置基线承诺时间和预警余量
场景二：当预警余量设置不合理，即基线预警时间（基线承诺时间-余量）在基线上任务最晚完成时间段内时：任务出现异常时，因为预留的异常处理时间不够，容易造成基线破线，基线报警频繁。场景三：当基线承诺时间设置不合理，即基线承诺时间...
上线实时任务
前提条件 已新增实时任务，具体操作，请参见 新增实时任务、新增多表实时任务。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。在左侧导航栏，单击 ...
上线实时任务
前提条件 已新增实时任务，具体操作，请参见 新增实时任务、新增多表实时任务。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。在左侧导航栏，单击 图标，...
新增多表实时任务
数据同步支持实时任务新增多表任务，并支持一键启动多个上云任务，实现全量任务自动建表。本文介绍如何新增多表实时任务。前提条件 已新建Oracle和DataHub数据源，请参见 新建数据源。说明 当前仅支持Oracle LogMiner（11G）到DataHub多表...
新增多表实时任务
数据同步支持实时任务新增多表任务，并支持一键启动多个上云任务，实现全量任务自动建表。本文介绍如何新增多表实时任务。前提条件 已新建Oracle和DataHub数据源，请参见 新建数据源。说明 当前仅支持Oracle LogMiner（11G）到DataHub多表...
监控与日志
支持对运维任务执行情况、资源是否出现异常、资源状态变化等问题进行实时监控。更多监控信息，请参见 使用事件中心。同时支持对监控项设置报警规则，报警通知方式包括电话、短信、邮件、钉钉机器人、阿里云App通知。具体操作，请参见 创建...
AIMaster：弹性自动容错引擎
除了对任务容错信息通知外，当您判断任务训练出现异常时，比如loss出现Nan，也可以在代码中使用AIMaster SDK发送自定义通知消息，如下所示 说明 本功能需要安装AIMaster whl包，详情请参见 常见问题解答。from aimaster import job_monitor...
MySQL一键实时同步至MaxCompute
为避免上述阶段出现异常导致数据未产出，我们需要分别为实时同步子任务及Merge节点进行监控。实时同步报警配置。进入实时任务运维页面。找到已创建的实时同步任务，单击操作列的 报警设置，进入报警设置页面。在报警设置页面，选择 报警...
MySQL一键实时同步至MaxCompute
为避免上述阶段出现异常导致数据未产出，我们需要分别为实时同步子任务及Merge节点进行监控。实时同步报警配置。进入实时任务运维页面。找到已创建的实时同步任务，单击操作列的 报警设置，进入报警设置页面。在报警设置页面，选择 报警...
添加订阅配置
任务异常通知：监控任务出现异常（任务状态符合告警级别）时的实时告警通知。定期巡检报告：周期性对业务分组下所有任务的巡检报告输出（统计分析指标输出）。标准协议：按照标准化的参数结构要求输出消息订阅内容，由第三方应用依照自身...
添加订阅配置
任务异常通知：监控任务出现异常（任务状态符合告警级别）时的实时告警通知。定期巡检报告：周期性对业务分组下所有任务的巡检报告输出（统计分析指标输出）。标准协议：按照标准化的参数结构要求输出消息订阅内容，由第三方应用依照自身...
实时模式时间参数配置
为了规避在 任务参数 处经常漏掉配置 stat_date，您只需要在实时任务配置的属性配置中新增 stat_date 的 kv 配置，其中 Value 是一个基于业务时间的表达式，同时您也可以配置多个时间参数，使用半角分号;分割。例如：stat_date=${yyyyMMdd-...
实时模式时间参数配置
为了规避在 任务参数 处经常漏掉配置 stat_date，您只需要在实时任务配置的属性配置中新增 stat_date 的 kv 配置，其中 Value 是一个基于业务时间的表达式，同时您也可以配置多个时间参数，使用半角分号;分割。例如：stat_date=${yyyyMMdd-...
实时同步任务运维
Worker列表是指实时任务启动的实例，非分布式任务只有一个Worker，分布式任务根据并发数会有多个Worker。Task列表是指一个Worker内部的线程任务，分为Reader类型和Writer类型，根据配置的并发数会有1个到多个的Reader任务和1个到多个的...
查看并管理实时任务
实时任务批量操作 实时任务在实时任务页面支持的运维操作如下：操作 描述 启动正式实例 支持同时启动运行多个实时实例。说明 仅适用于Prod和Basic项目，且选中的实时任务均未启动运行。批量启动正式实例不支持实时集成任务。勾选多个 未...
概述
AliOS Things操作系统内核特性如下：可抢占式/协作式任务调度 多任务管理 软件定时器 任务间通信机制包括信号量、互斥量、队列、事件 内存管理 时间功能 随机数 系统信息 系统初始化 工作队列 版权信息 说明 Apache license v2.0 目录结构...
查看并管理实时任务
实时任务批量操作 实时任务在实时任务页面支持的运维操作如下：操作 描述 启动正式实例 支持同时启动运行多个实时实例。说明 仅适用于Prod和Basic项目，且选中的实时任务均未启动运行。批量启动正式实例不支持实时集成任务。勾选多个 未...
一键MaxCompute任务出错恢复
单击对应同步任务 操作 列的 全量补数据，配置全量补数据参数。选择补数据的业务日期。选择前一天的日期作为补数据业务日期。选择补数据端表。在左侧选择框，选择要执行全量同步的表，如果是恢复整个任务，就选择所有表，单击 图标，将其...
查看实时同步任务详情
实时同步任务是由实时数据同步时发起的任务，运维监控支持查看实时同步任务及其详情。本文介绍查看实时同步任务的详情。前提条件 已上线实时同步任务，具体操作，请参见 上线实时任务。操作步骤 登录企业数据智能平台。在页面左上角，单击 ...
查看实时同步任务详情
实时同步任务是由实时数据同步时发起的任务，运维监控支持查看实时同步任务及其详情。本文介绍查看实时同步任务的详情。前提条件 已上线实时同步任务，具体操作，请参见 上线实时任务。操作步骤 登录企业数据智能平台。在页面左上角，单击 ...
查看实时同步任务详情
实时同步任务是由实时数据同步时发起的任务，运维监控支持查看实时同步任务及其详情。本文介绍查看实时同步任务的详情。前提条件 已上线实时同步任务，具体操作，请参见 上线实时任务。操作步骤 登录 数据资源平台控制台。在页面左上角，...
新增实时任务
数据同步支持实时同步任务的新建，并支持一键启动多个上云任务，实现全量任务自动建表。本文以同步Kafka数据源到DataHub目标端为例，介绍如何新增实时任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标...
新增实时任务
数据同步支持实时同步任务的新建，并支持一键启动多个上云任务，实现全量任务自动建表。本文以同步Kafka数据源到DataHub目标端为例，介绍如何新增实时任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标...
实时同步任务延迟解决方案
确认MySQL源端是否有提交大事务或者变更过于频繁（如大量的DML和DDL的操作）对于源端是MySQL的实时同步任务，如果根据上述步骤未发现异常或Failover，则需要检查源端系统是否提交了大事务或者源端系统变更过于频繁（如大量的DML和DDL的操作...
实时计算任务运行与管理
DataWorks的实时计算任务页面为您展示了任务实例的基本信息及运行详情，方便您查看目标任务的运行情况。同时，您还可以为目标任务设置监控报警，在任务运行出错时及时发现并处理异常。使用限制 DataWorks当前仅支持对EMR Spark Streaming及...
查看及管理实时计算任务列表
在Dataphin的实时计算任务列表为您展示了实时任务的基本信息及相关管理操作选项，方便您查看创建的实时任务并进行管理。本文为您介绍实时计算任务列表支持的管理功能。实时 计算任务列表入口 在Dataphin首页，单击顶部菜单栏 研发。默认...
查看及管理实时计算任务列表
在Dataphin的实时计算任务列表为您展示了实时任务的基本信息及相关管理操作选项，方便您查看创建的实时任务并进行管理。本文为您介绍实时计算任务列表支持的管理功能。实时 计算任务列表入口 在Dataphin首页，单击顶部菜单栏 研发。默认...
入仓解决方案
入仓解决方案可添加和运行多个实时同步任务、实时迁移任务，实现全量或近实时增量迁移和集成数据，用于满足项目空间内业务场景的数据迁移和集成需求。根据所需的同步效率、同步数据量需求，创建入仓解决方案同步线上库数据。入仓解决方案...
概述
任务调度 TS（Task Scheduler）提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化对金融企业不同业务系统的任务进行统一的调度和全方位监控运维管理，达到所有任务有序、高效运行的目的，极大降低开发和...
实例启动/停止异常常见问题
正常启动：ECS可能因操作系统本身启动任务比较多，或者系统配置不高导致操作系统启动反应慢，所以启动时间比较长。异常启动：ECS启动有异常，比如Windows启动时，进入后修复模式或安全模式，需要手动修复；或者Linux有多个内核版本，启动时...
trace
更正文档 概述 SystemView 是一个用于分析嵌入式系统性能的trace工具。SystemView可以分析系统中有哪些中断、任务执行了，以及它们的先后关系。可以完整的深入观察一个应用程序运行时的行为，它揭示了在任务运行中发生了什么，哪个中断触发...
查看实时任务监控
任务监控对发布上线的任务实现全链路监控和实例监控。本文介绍如何查看实时任务监控...在 实时数据同步 页面，单击目标实时任务 操作 列的 监控。跳转到 实时同步任务 页面，可查看实时任务运行详情，更多信息，请参见 查看实时同步任务详情。
查看实时任务监控
任务监控对发布上线的任务实现全链路监控和实例监控。本文介绍如何查看实时任务监控...在 实时数据同步 页面，单击目标实时任务 操作 列的 监控。跳转到 实时同步任务 页面，可查看实时任务运行详情，更多信息，请参见 查看实时同步任务详情。
实时同步常见问题
如果选择忽略TRUNCATE，可能会导致进行实时数据同步时出现多的数据。如何提高实时同步的速度和性能？如果同步写入速度较慢，可以适当增加写入端并发数，调整JVM参数，JVM参数与同步库数量无关，和变更频率有关。在当前资源组机器允许情况下...
实时同步任务运行与管理
实时同步任务页面为您展示实时同步任务提交至调度系统后，经过调度系统运行后产生的实时同步任务实例。进入实时任务运维页面 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>运维中心，在下拉框中选择对应工作空间后单击 进入运维...
实时同步任务告警设置最佳实践
对于DataWorks数据集成的实时同步任务、全增量同步任务的实时同步阶段，您可以设置任务告警规则，用来监控同步任务的状态，本文为您介绍实时同步任务告警设置的指标有哪些，并为您示例一个最佳实践。告警规则指标 您可以在DataWorks的运维...
DataStudio侧实时同步任务配置
说明 建议实时同步任务与离线同步任务运行在不同的资源组上，避免混跑带来资源互相抢占、运行态互相影响等问题，例如，CPU、内存、网络等互相影响，导致离线同步任务突然变慢、实时同步任务延迟、以及在资源不足的极端情况下可能会出现任务...
订阅
异常通知：核对任务执行出现异常时触发通知。任务通知：核对任务执行结果为失败时触发通知。订阅成功后，您可以在 核对点列表 页面选择 全部核对点>我订阅的核对点 过滤出您已订阅的核对点。下面将介绍批量订阅和单个订阅的具体操作步骤。...
运维中心概述
实时实例生成逻辑 当实时任务被提交或发布至 运维中心 后，您可以在 运维中心的实时任务列表 对实时任务进行启动、修改资源配置等相关操作。在Basic模式和Dev-Prod模式的Prod环境下，实时任务提交后将自动生成实时实例，自动生成的实例为未...
- 产品推荐
- 这些文档可能帮助您