您可以查看离线任务运行记录和相关日志。前提条件 已部署应用,具体操作,请参见 部署应用。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 弹性计算。在左侧导航栏,选择 应用运维>离线任务运行记录。在 离线任务运行记录...
您可以查看离线任务运行记录和相关日志。前提条件 已部署应用,具体操作,请参见 部署应用。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 弹性计算。在左侧导航栏,选择 应用运维>离线任务运行记录。在 离线任务运行...
您可以在离线任务编辑器属性对话框中查看离线任务的基本详细和进行调度配置,包括任务的名称、ID、类型,并配置对应责任人、描述等基本信息。本文为您介绍离线任务属性的基本信息参数配置。操作步骤 请参见 离线任务属性入口,进入离线任务...
您可以在离线任务编辑器属性对话框中查看离线任务的基本详细和进行调度配置,包括任务的名称、ID、类型,并配置对应责任人、描述等基本信息。本文为您介绍离线任务属性的基本信息参数配置。操作步骤 请参见 离线任务属性入口,进入离线任务...
在任务中心,当离线同步...在左侧导航栏,单击 图标,选择 离线任务>离线同步实例。在 离线同步实例 页面,搜索待重跑的离线同步实例。说明 单击 更多,可设置更多查询条件。在离线同步实例列表中,单击目标离线同步实例 操作 列的 重跑实例。
在任务中心,当离线同步...在左侧导航栏,单击 图标,选择 离线任务>离线同步实例。在 离线同步实例 页面,搜索待重跑的离线同步实例。说明 单击 更多,可设置更多查询条件。在离线同步实例列表中,单击目标离线同步实例 操作 列的 重跑实例。
在任务中心,您可以重跑...在左侧导航栏,单击 图标,选择 离线任务>离线计算实例。在 离线计算实例 页面,搜索待重跑的离线计算实例。在离线计算实例列表中,选中待重跑的离线计算实例。在页面左下角,单击 批量重跑,在提示框中单击 确定。
在任务中心,您可以重跑...在左侧导航栏,单击 图标,选择 离线任务>离线计算实例。在 离线计算实例 页面,搜索待重跑的离线计算实例。在离线计算实例列表中,选中待重跑的离线计算实例。在页面左下角,单击 批量重跑,在提示框中单击 确定。
离线 模板 引用是指离线任务基于离线 模板进行创建,创建成功的 离线 任务即为该 离线 模板的引用。本文为您介绍如何查看及管理 离线 模板的引用对象。离线模板引用 对象入口 在Dataphin首页,单击顶部菜单栏中的 研发。在数据 开发 页面,...
离线 模板 引用是指离线任务基于离线 模板进行创建,创建成功的 离线 任务即为该 离线 模板的引用。本文为您介绍如何查看及管理 离线 模板的引用对象。离线模板引用 对象入口 在Dataphin首页,单击顶部菜单栏中的 研发。在数据 开发 页面,...
根据业务流程,任务流中包含了不同类型的节点,如MaxCompute离线任务、Flink流式任务等。不同类型的节点会生成各类任务,主要包括离线同步任务、离线计算任务、实时同步任务、实时计算任务等。对于离线同步任务、离线计算任务,每次运行时...
根据业务流程,任务流中包含了不同类型的节点,如MaxCompute离线任务、Flink流式任务等。不同类型的节点会生成各类任务,主要包括离线同步任务、离线计算任务、实时同步任务、实时计算任务等。对于离线同步任务、离线计算任务,每次运行时...
根据业务流程,任务流中包含了不同类型的节点,如MaxCompute离线任务、Flink流式任务等。不同类型的节点会生成各类任务,主要包括离线同步任务、离线计算任务、实时同步任务、实时计算任务等。对于离线同步任务、离线计算任务,每次运行时...
离线任务 离线任务管理主要是对离线模型自动化调度运行进行任务式管理。每次任务调度时,都将按照模型设置好的参数和数据自动运行,每次任务都是一个实例,通过实例状态监控最近一次任务的健康情况(是否运行成功)。实时任务 实时任务管理...
说明:PYTHON离线任务支持PYTHON语言的3.6版本。PYTHON离线任务应用zip包的规范如下:zip包里面根目录不要出现start.sh和start_flow.sh zip包结构参照如下 xxx.zip#zip包中仅包含算法代码即可,根目录不要含有start.sh、start_flow.sh两个...
说明:PYTHON离线任务支持PYTHON语言的3.6版本。PYTHON离线任务应用zip包的规范如下:zip包里面根目录不要出现start.sh和start_flow.sh zip包结构参照如下 xxx.zip#zip包中仅包含算法代码即可,根目录不要含有start.sh、start_flow.sh两个...
说明:JAVA离线任务应用支持JAVA7和8两个版本。JAVA 离线任务应用zip包的规范如下:zip包里面根目录请勿出现start.sh和start_flow.sh zip包结构参照如下 xxx.zip#上传的zip包中仅包含算法代码即可,不要含有start.sh、start_flow.sh两个文件...
说明:JAVA离线任务应用支持JAVA7和8两个版本。JAVA 离线任务应用zip包的规范如下:zip包里面根目录请勿出现start.sh和start_flow.sh zip包结构参照如下 xxx.zip#上传的zip包中仅包含算法代码即可,不要含有start.sh、start_flow.sh两个文件...
不同计算引擎配置离线模式运行参数的操作路径相同,下图以配置Ververica Flink计算引擎的离线任务运行参数为例。说明 若您项目中所有计算任务均需配置同一的任务参数,您可在新建项目时进行全局的统一配置。详情请参见 创建通用项目。BLINK...
不同计算引擎配置离线模式运行参数的操作路径相同,下图以配置Ververica Flink计算引擎的离线任务运行参数为例。说明 Fusioninsight引擎不支持自定义参数,仅支持系统默认自带的参数。若您项目中所有计算任务均需配置同一的任务参数,您可...
本文将指导您如何新建标签离线任务。限制说明 标签离线服务发布后,不支持修改。为保障数据的高可用,运行标签离线服务时,系统会将数据写入临时表({目标表}_dpfx_b);写入完成后,将原目标表进行重命名({目标表}_dpfx_tmp),目标表重...
对于离线任务,若需要周期性调度运行,您需定义该任务的调度相关属性,包括调度周期、调度依赖、调度参数等。本文为您介绍离线任务属性与调度的相关内容。注意事项 系统仅支持 调度类型为周期任务 的离线计算任务进行调度配置。依赖关系是...
对于离线任务,若需要周期性调度运行,您需定义该任务的调度相关属性,包括调度周期、调度依赖、调度参数等。本文为您介绍离线任务属性与调度的相关内容。注意事项 系统仅支持 调度类型为周期任务 的离线计算任务进行调度配置。依赖关系是...
选择 任务中心>离线任务>离线计算任务。在 离线计算任务 页面,单击目标任务右侧 操作 列的 运维。在 任务节点详情 面板,单击目标节点,在查看任务信息,任务代码,最新实例。查看任务实例运维 登录企业数据智能平台。在页面左上角,选择>...
在左侧导航栏,选择>离线任务>离线计算实例。在 离线计算实例 页面,单击目标实例 操作 列的 运维,页面跳转到 实例节点详情 页面。在 实例节点详情 页面,右键单击画布视图中的 目标节点,展开所有节点。在画布下方查看实例信息,任务代码...
在左侧导航栏,选择 离线任务>调度任务。在 调度任务 页面右上角,单击 新建调度任务。在 新建 调度 任务 面板中,配置任务名称、模型名称、模型版本、数据源、调度周期、调度时间和描述文字。配置项 说明 任务名称 自定义调度任务名称。...
离线任务监控功能支持您通过配置监控规则实现对离线任务的运行状态进行监控。在离线任务触发所配置的监控规则时,系统将根据所配置的接收人发送报警,以协助您 保障 任务的正常运行和数据的产出。功能介绍 离线任务中支持对Basic项目或者...
离线任务监控功能支持您通过配置监控规则实现对离线任务的运行状态进行监控。在离线任务触发所配置的监控规则时,系统将根据所配置的接收人发送报警,以协助您 保障 任务的正常运行和数据的产出。功能介绍 离线任务中支持对Basic项目或者...
Alibaba Blink流批一体任务离线模式的资源配置支持配置任务的资源队列和引擎版本。本文为您介绍如何配置流批一体任务离线模式的资源配置。操作步骤 请参见 离线模式配置入口,进入实时任务的 离线模式 配置页面。在配置面板中 资源配置 ...
Alibaba Blink流批一体任务离线模式的资源配置支持配置任务的资源队列和引擎版本。本文为您介绍如何配置流批一体任务离线模式的资源配置。操作步骤 请参见 离线模式配置入口,进入实时任务的 离线模式 配置页面。在配置面板中 资源配置 ...
本实践使用独享数据集成资源组进行离线任务运行,因此您需先购买并配置独享数据集成资源组。操作详情请参见 新增和使用独享数据集成资源组。准备示例数据表 本实践需准备一个MongoDB数据集合、一个MaxCompute表,用于后续进行离线数据同步...
可以限制任务的并发,通过指定Proxima离线任务的行列,也可以在自己的MaxCompute Project控制台加限制,这些都会导致离线任务运行变慢。尽量分离两个任务。可以尝试分时使用集群,或者尝试申请新的资源。RunLog与Logview是什么含义?有什么...
配置区域 参数 说明 读端配置 离线任务源端最大连接数 支持您通过该参数控制当前同步方案所产生的所有离线子同步任务可占用的源端数据库连接数,即同一时间内,当前同步解决方案所产生的所有离线子同步任务读取数据库的并发数上限。...
Fusioninsight Flink流批一体任务离线模式的资源配置支持配置任务的生产环境和开发的资源队列、引擎版本信息。本文为您如何配置流批一体任务离线模式的资源配置。操作步骤 请参见 离线模式配置入口,进入实时任务的 离线模式 配置页面。在...
资源统计项目 统计口径 描述 数据处理单元 同步&集成任务:每3个离线任务(数据同步任务+数据集成任务数)向上取整计算1个数据处理单元;其中,前200个集成同步任务免费。计算任务:每1个离线计算任务或实时计算任务计算1个数据处理单元。...
不同类型的资源组用于任务不同的执行阶段,本文以离线任务调度为例,为您介绍DataWorks离线任务下发机制,与任务运行过程中使用的资源组。详情请参见 任务下发机制。任务同一个执行阶段可选择不同类型的资源组,例如,离线任务调度可选择...
DataWorks智能监控 DataWorks对MaxCompute进行离线任务调度时,提供智能监控工具,对调度任务进行监控告警。根据监控规则和任务运行情况,智能监控决策是否报警、何时报警、如何报警以及给谁报警。智能监控会自动选择最合理的报警时间、...
离线全量同步 参数 描述 离线任务名称规则 全量同步时的离线任务名称。创建解决方案后,会先生成一个离线任务用于同步全量数据,再生成实时任务实时同步增量数据。全量离线任务资源组 运行全量离线任务需要使用的独享数据集成资源组。目前...
配置区域 参数 说明 读端配置 离线任务源端最大连接数 支持您通过该参数控制当前同步方案所产生的所有离线子同步任务可占用的源端数据库连接数,即同一时间内,当前同步解决方案所产生的所有离线子同步任务读取数据库的并发数上限。...
开源Flink流批一体任务离线模式的资源配置支持配置任务的生产环境和开发的资源队列、引擎版本以及任务的并行度、Task Manager数量、Job Manager Momory和Task Manager Momory。本文为您如何配置流批一体任务离线模式的资源配置。操作步骤 ...