DataWorks支持强制重跑下游功能,用于强制重新调度指定的节点及其下游节点,并支持通过工作空间过滤要重跑的下游节点。本文为您介绍强制重跑下游功能的注意事项和操作步骤。使用限制 仅DataWorks专业版及更高版本可以使用强制重跑下游功能...
后续您可以对脚本实例进行运维操作,支持的运维操作包括查看运行日志、重跑、强制重跑当前实例、强制重跑下游实例、查看节点代码等操作。本文为您介绍如何查看并管理脚本实例。脚本实例页面入口 在Dataphin首页,单击顶部菜单栏的 研发。...
强制重跑 强制重跑支持强制重跑当前实例和强制重跑下游实例。强制重跑当前实例:强制重跑时间不校验上游节点的运行状态。如果上游节点没有全部运行成功,则当前实例可能重跑失败或数据错误,请您谨慎操作。强制重跑当前脚本实例后,当前...
强制重跑 强制重跑支持强制重跑当前实例和强制重跑下游实例。强制重跑下游实例:执行强制重跑下游操作后,所有实例会先被置为 未运行 状态,防止上游重跑的同时下游也在运行造成的数据错乱。仅起点不针对上游依赖和定时运行时间进行校验,...
在任务中心,您可以重跑离线计算实例,重新运行离线任务。本文主要介绍如何重跑离线计算实例。背景信息 只有全量任务支持重跑,增量任务不支持。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,...
同时,DataWorks支持设置周期任务默认使用的资源组,支持设置任务的默认重跑属性、重跑次数、重跑时间间隔。使用限制 调度设置的默认调度属性仅对新建的周期任务生效。设置周期任务的默认调度配置 进入数据开发页面。登录 DataWorks控制台...
在任务中心,您可以重跑离线计算实例,重新运行离线任务。本文主要介绍如何重跑离线计算实例。背景信息 只有全量任务支持重跑,增量任务不支持。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 ...
运行成功后不可重跑,运行失败后可以重跑 如果节点运行一次成功后,重跑后会影响运行结果,而运行失败后重跑不会影响结果,可选择使用该重跑类型。运行成功或失败后皆不可重跑 如果节点不管运行成功或失败,重跑后都会影响运行结果(例如,...
在任务中心,当离线同步实例未成功运行时,您可以重跑离线同步实例,重新运行离线任务。本文主要介绍如何重跑离线同步实例。背景信息 只有全量任务支持重跑,增量任务不支持。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,...
失败自动重跑 如果 重跑属性 设置为 运行成功或失败后皆可重跑 和 运行成功后不可重跑,运行失败后可以重跑 时,会显示该属性,可以配置任务出错自动重跑。如果设置为 运行成功或失败后皆不可重跑,则不会显示该属性,即任务出错不会自动重...
在任务中心,当离线同步实例未成功运行时,您可以重跑离线同步实例,重新运行离线任务。本文主要介绍如何重跑离线同步实例。背景信息 只有全量任务支持重跑,增量任务不支持。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,...
概述 Dataphin的重跑并恢复调度和强制重跑的区别。详细信息 重跑并恢复调度就是重跑,有条件限制的,如果有上游的话,就必须满足上游成功状态和到达定时时间,才可以运行重跑。但是强制重跑运用范围更广,不需要看上游这个运行状态,可以...
概述 本文为您介绍Dataphin中重跑下游的逻辑是怎样的。详细信息 举例:有A任务,A任务下有两个下游依赖任务分别是物理任务B任务,逻辑表任务C任务,选择A任务的重跑下游选项后,依赖任务A的下游物理任务(B任务)和下游逻辑表C中依赖A的...
同时,您还可以开启任务失败重跑功能,开启后,当任务失败时会自动重新执行。设置 任务执行的优先级 说明 任务优先级仅在任务排队执行时生效。设置任务的最大并发数。超过设置的并发任务额度时,DMS将会按照优先级的方式排队执行任务,否则...
场景一:周月实例空跑周期 任务定时时间为 定时每周几 或者“每月定时几号”跑的任务,任务只有在指定调度时间才会真实跑数据,在非指定时间内,非调度时间内其他时间会生成空跑实例,不会实际执行任务,该实例状态为 周月实例空跑周期。...
观看以下视频,了解如何在本地跑通 xrpc 协议插件:
观看以下视频,快速了解如何在本地跑通 brpc 协议插件:
重跑失败或者成功状态的任务实例,只有专业版才支持。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 调试 授权信息 当前API暂无授权信息透出。请求...
⑤ 批量操作区 您可通过批量操作区域提供的重跑、终止、强制重跑功能,对手动实例进行批量处理,提高操作效率。操作详情,请参见 手动实例批量操作。查看手动实例列表 手动实例列表页面展示当前业务类型的实例对象、运行状态、业务日期、...
您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略,杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置离线计算任务的运行配置。操作步骤 请参见 离线...
您可根据业务场景为维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略,杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置逻辑表运行设置。操作步骤 请参见 数据开发入口,...
本文为您介绍如何查看任务详情、重跑任务、查看日志。推送类型 和 治理项类型 的任务管理功能模块是相似的,本章节以 治理项类型 为例进行介绍。进入任务管理页面 在Dataphin首页,单击顶部菜单栏的 资产。在 资产 页面,按照下图指引,...
您可根据租户类型和业务场景为不同的租户配置运行实例的超时时间和运行任务失败时的重跑策略,杜绝因运行实例长时间资源占用造成资源浪费的同时提高运行实例的可靠性。本文将为您介绍如何进行运行配置。生效范围 运行配置所设置的策略仅...
您可根据租户类型和业务场景为不同的租户配置运行实例的超时时间和运行任务失败时的重跑策略,杜绝因运行实例长时间资源占用造成资源浪费的同时提高运行实例的可靠性。本文将为您介绍如何进行运行配置。生效范围 运行配置所设置的策略仅...
您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略,杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置离线计算任务的运行配置。操作步骤 请参见 离线...
续跑:用于续跑失败状态的任务,续跑将从任务执行失败的位置继续运行,即当任务中存在多段sql的情况下,续跑可从具体失败的sql处重新运行该任务。说明 仅MaxCompute的SQL任务支持此操作。2021年1月之后购买的独享调度资源组,如果需要升级 ...
观看以下视频,了解如何在本地跑通解析 HTTP 报文体插件:
本地如何跑通 brpc 协议插件 演示本地跑通 brpc 协议的效果。xrpc 协议插件 xrpc 协议插件的上传和部署 演示开发完私有 XML RPC 协议插件后部署和调用流程。ESB XML 协议插件深度解析 介绍金融场景 ESB 的协议接入。课后练习:通过 MOSN ...
您可根据业务场景为离线管道任务配置任务级的运行超时时间和任务运行失败时的重跑策略,离线管道任务长时间资源占用造成资源浪费的同时提高离线管道任务运行的可靠性。本文将为您介绍如何配置离线管道任务的运行配置。操作步骤 请参见 离线...
您可根据业务场景为离线管道任务配置任务级的运行超时时间和任务运行失败时的重跑策略,离线管道任务长时间资源占用造成资源浪费的同时提高离线管道任务运行的可靠性。本文将为您介绍如何配置离线管道任务的运行配置。操作步骤 请参见 离线...
操作 描述 重跑 重跑包括重跑所有失败实例、重跑所有终态实例和强制重跑所有实例。重跑后,直接更新当前实例节点的数据。因当前实例运行失败而未开始运行的下游节点,在当前实例重跑成功后,会自动开始运行。您可按照下图操作指引选择相应...
调用ReRunTaskFlowInstance接口,重跑任务流实例。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限...
操作 描述 重跑 重跑包括重跑所有失败实例、重跑所有终态实例和强制重跑所有实例。重跑后,直接更新当前实例节点的数据。因当前实例运行失败而未开始运行的下游节点,在当前实例重跑成功后,会自动开始运行。您可按照下图操作指引选择相应...
操作 描述 重跑 重跑包括重跑所有失败实例、重跑所有终态实例和强制重跑所有实例。重跑后,直接更新当前实例节点的数据。因当前实例运行失败而未开始运行的下游节点,在当前实例重跑成功后,会自动开始运行。您可按照下图操作指引选择相应...
您可以在DataWorks 运维中心 的 查看周期实例 页面查看该同步任务Merge实例的执行情况,如果Merge任务和强制重跑操作产生冲突,您可以:暂停强制重跑操作,等待Merge任务执行完成后,再执行强制重跑操作。冻结即将运行的Merge实例,等待...
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效(离线T+1)且该逻辑表设置了 事件时间 字段,才可配置是否开启数据...
观看以下视频,快速了解如何在本地跑通简单鉴权拦截器插件:
reRunAble 节点是否可以重跑,取值如下:0:表示 运行成功后不可重跑,运行失败后可以重跑。1:表示 运行成功或失败后均可重跑。2:表示 运行成功或失败后皆不可重跑。startEffectDate 调度生效日期的开始时间。endEffectDate 调度生效日期...
报错内容:当目标任务 调度配置 的 时间属性 中,重跑属性 配置为 运行成功或失败后皆可重跑 或 运行成功后不可重跑,运行失败后可以重跑,实际执行任务时,该任务在运行失败后未重跑,并产生 Task Run Timed Out,Killed by System!...
您可以在DataWorks 运维中心 的 查看周期实例 页面查看该全增量同步任务Merge实例的执行情况,如果Merge任务和强制重跑操作产生冲突,您可以:暂停强制重跑操作,等待Merge任务执行完成后,再执行强制重跑操作。冻结即将运行的Merge实例,...