UDF（嵌入式）
背景信息 您可以通过MaxCompute的代码嵌入式UDF解决以下代码实现过程繁琐，且不方便阅读和维护的问题：创建UDF并完成代码开发后，您还需要完成代码编译（Java）、创建资源和创建函数操作，过程比较繁琐。SQL脚本中如果包含UDF，您无法直接...
上线实时任务
前提条件 已新增实时任务，具体操作，请参见 新增实时任务、新增多表实时任务。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。在左侧导航栏，单击 ...
上线实时任务
前提条件 已新增实时任务，具体操作，请参见 新增实时任务、新增多表实时任务。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。在左侧导航栏，单击 图标，...
入仓解决方案
入仓解决方案可添加和运行多个实时同步任务、实时迁移任务，实现全量或近实时增量迁移和集成数据，用于满足项目空间内业务场景的数据迁移和集成需求。根据所需的同步效率、同步数据量需求，创建入仓解决方案同步线上库数据。入仓解决方案...
新增多表实时任务
数据同步支持实时任务新增多表任务，并支持一键启动多个上云任务，实现全量任务自动建表。本文介绍如何新增多表实时任务。前提条件 已新建Oracle和DataHub数据源，请参见 新建数据源。说明 当前仅支持Oracle LogMiner（11G）到DataHub多表...
新增多表实时任务
数据同步支持实时任务新增多表任务，并支持一键启动多个上云任务，实现全量任务自动建表。本文介绍如何新增多表实时任务。前提条件 已新建Oracle和DataHub数据源，请参见 新建数据源。说明 当前仅支持Oracle LogMiner（11G）到DataHub多表...
异地多活常见问题
分布式调度任务在多活场景下如何解决的？MSHA数据面的性能指标是怎样的？是否做好入口流量分发和数据同步，就能快速具备异地多活能力？基于MSHA的业务改造成本是怎样的？如何做好双活和之前业务的过渡态，如何控制风险？微服务在多活场景下...
EDAS 3.0助力佐朋数科快速实现上云
分布式任务调度：支持编排定时任务、工作流任务、跑批操作和分布式任务调度。解决方案 阿里云的EDAS 3.0是一站式企业级分布式应用服务，通过接入EDAS 3.0即可获得应用生命周期的管理能力，支持各种发布方式，可以利用应用的监控来快速定位...
DescribeDataFlowTasks-查询数据流动任务列表
Import DataType string 数据流动任务操作的数据类型。包括：Metadata：文件的元数据，包括文件的 timestamp,ownership,permission 等属性信息。选择 Metadata，只会导入文件的元数据，用户只能看到该文件，但访问该文件数据时，数据从源端...
实时模式时间参数配置
为了规避在 任务参数 处经常漏掉配置 stat_date，您只需要在实时任务配置的属性配置中新增 stat_date 的 kv 配置，其中 Value 是一个基于业务时间的表达式，同时您也可以配置多个时间参数，使用半角分号;分割。例如：stat_date=${yyyyMMdd-...
实时模式时间参数配置
为了规避在 任务参数 处经常漏掉配置 stat_date，您只需要在实时任务配置的属性配置中新增 stat_date 的 kv 配置，其中 Value 是一个基于业务时间的表达式，同时您也可以配置多个时间参数，使用半角分号;分割。例如：stat_date=${yyyyMMdd-...
实时同步任务运维
Worker列表是指实时任务启动的实例，非分布式任务只有一个Worker，分布式任务根据并发数会有多个Worker。Task列表是指一个Worker内部的线程任务，分为Reader类型和Writer类型，根据配置的并发数会有1个到多个的Reader任务和1个到多个的...
查看并管理实时任务
实时任务批量操作 实时任务在实时任务页面支持的运维操作如下：操作 描述 启动正式实例 支持同时启动运行多个实时实例。说明 仅适用于Prod和Basic项目，且选中的实时任务均未启动运行。批量启动正式实例不支持实时集成任务。勾选多个 未...
查看并管理实时任务
实时任务批量操作 实时任务在实时任务页面支持的运维操作如下：操作 描述 启动正式实例 支持同时启动运行多个实时实例。说明 仅适用于Prod和Basic项目，且选中的实时任务均未启动运行。批量启动正式实例不支持实时集成任务。勾选多个 未...
查看实时同步任务详情
实时同步任务是由实时数据同步时发起的任务，运维监控支持查看实时同步任务及其详情。本文介绍查看实时同步任务的详情。前提条件 已上线实时同步任务，具体操作，请参见 上线实时任务。操作步骤 登录企业数据智能平台。在页面左上角，单击 ...
查看实时同步任务详情
实时同步任务是由实时数据同步时发起的任务，运维监控支持查看实时同步任务及其详情。本文介绍查看实时同步任务的详情。前提条件 已上线实时同步任务，具体操作，请参见 上线实时任务。操作步骤 登录企业数据智能平台。在页面左上角，单击 ...
查看实时同步任务详情
实时同步任务是由实时数据同步时发起的任务，运维监控支持查看实时同步任务及其详情。本文介绍查看实时同步任务的详情。前提条件 已上线实时同步任务，具体操作，请参见 上线实时任务。操作步骤 登录 数据资源平台控制台。在页面左上角，...
实时同步任务延迟解决方案
确认造成延迟问题在同步任务的读端还是写端 如果是在DataStudio创建的实时同步任务，您需要在 运维中心>实时任务运维>实时同步任务 界面单击运行中的任务名称，弹出任务运行详情对话框。详情请参见 实时同步任务运行与管理。在任务运行详情...
查看及管理实时计算任务列表
在Dataphin的实时计算任务列表为您展示了实时任务的基本信息及相关管理操作选项，方便您查看创建的实时任务并进行管理。本文为您介绍实时计算任务列表支持的管理功能。实时 计算任务列表入口 在Dataphin首页，单击顶部菜单栏 研发。默认...
查看及管理实时计算任务列表
在Dataphin的实时计算任务列表为您展示了实时任务的基本信息及相关管理操作选项，方便您查看创建的实时任务并进行管理。本文为您介绍实时计算任务列表支持的管理功能。实时 计算任务列表入口 在Dataphin首页，单击顶部菜单栏 研发。默认...
增加或删除已运行任务的同步表
同步数据至Kafka解决方案为您提供了一键增加及删除同步表功能，方便您为已成功配置运行的同步任务快速添加新表或删除已有同步表。本文为您介绍如何增加或删除已运行任务的同步表。前提条件 已创建并运行同步数据至Kafka解决方案的任务，...
实时同步常见问题
当源端数据量增大，或者同步解决方案任务重新编辑过同步任务（将任务由读取单库单表变更为读取多库多表），导致当前资源组消耗不了当前同步数据量级，此时您可选择扩大资源组规格，资源组规格调整详情请参考：变更规格操作。同步起始位点...
设备端接收的错误码
本文介绍物联网平台可能返回给设备端的错误码及说明。公共错误码 表 1.通用公共错误码 错误码 原因 解决办法 400 处理请求时出错。提交工单。429 请求过于频繁，触发系统限流。提交工单。460 设备上报的数据为空，或参数格式错误、参数的...
TerminateDISyncInstance
下线数据集成实时同步任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
任务拓扑相关问题
问题原因 任务拓扑本身可以通过 CRON 表达式或者事件触发，但可以加入拓扑的任务节点必须符合以下要求：触发方式为事件触发 通信方式为 CALLBACK 任务节点为简单任务、集群任务或其它拓扑任务 解决方案 修改待加入拓扑的任务的触发方式或...
trace
更正文档 概述 SystemView 是一个用于分析嵌入式系统性能的trace工具。SystemView可以分析系统中有哪些中断、任务执行了，以及它们的先后关系。可以完整的深入观察一个应用程序运行时的行为，它揭示了在任务运行中发生了什么，哪个中断触发...
新增实时任务
数据同步支持实时同步任务的新建，并支持一键启动多个上云任务，实现全量任务自动建表。本文以同步Kafka数据源到DataHub目标端为例，介绍如何新增实时任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标...
新增实时任务
数据同步支持实时同步任务的新建，并支持一键启动多个上云任务，实现全量任务自动建表。本文以同步Kafka数据源到DataHub目标端为例，介绍如何新增实时任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标...
概述
AliOS Things操作系统内核特性如下：可抢占式/协作式任务调度 多任务管理 软件定时器 任务间通信机制包括信号量、互斥量、队列、事件 内存管理 时间功能 随机数 系统信息 系统初始化 工作队列 版权信息 说明 Apache license v2.0 目录结构...
实时同步能力说明
DataWorks为您提供的实时数据同步功能，方便您使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步至目标数据库中，实现目标库实时保持和源库的数据对应。使用限制 实时同步不支持在数据开发界面运行任务，您需要保存、...
查看实时任务监控
任务监控对发布上线的任务实现全链路监控和实例监控。本文介绍如何查看实时任务监控...在 实时数据同步 页面，单击目标实时任务 操作 列的 监控。跳转到 实时同步任务 页面，可查看实时任务运行详情，更多信息，请参见 查看实时同步任务详情。
查看实时任务监控
任务监控对发布上线的任务实现全链路监控和实例监控。本文介绍如何查看实时任务监控...在 实时数据同步 页面，单击目标实时任务 操作 列的 监控。跳转到 实时同步任务 页面，可查看实时任务运行详情，更多信息，请参见 查看实时同步任务详情。
常见问题
以下为您介绍实时同步数据至 AnalyticDB for MySQL 3.0操作失败的常见问题和解决方案。PolarDB数据源网络联通性测试失败怎么办？MySQL数据源网络联通性测试失败怎么办？实时任务，运行报错：...
GenerateDISyncTaskConfigForUpdating
DataWorks目前仅支持直接使用 UpdateDISyncTask 接口更新数据集成离线同步任务，而数据集成实时同步任务和解决方案同步任务则需要先调用GenerateDISyncTaskConfigForUpdating和 QueryDISyncTaskConfigProcessResult 接口，异步生成更新数据...
一键MaxCompute任务出错恢复
本文为您介绍一键实时同步MaxCompute任务失败场景及恢复解决方法。常见的实时任务写入失败场景 场景分类 相关文档 Binlog无丢失场景及全增量同步任务 Binlog无丢失 Binlog有丢失场景及全增量同步任务 Binlog有丢失 Merge任务的报错失败场景...
数据集成
实时同步任务的下游任务 由于DataWorks仅支持为周期调度节点产出的表设置依赖，因此，当下游任务需对实时同步产出的表数据进行加工（即下游任务的上游依赖为实时同步任务），无法基于血缘关系设置依赖。您可根据工作空间业务复杂性，选择...
产品相关问题
可视化任务编排：简化多任务调度的运维管理，并支持暂停/恢复、跳过、加锁/解锁、重置、失败重试等多种人工预操作。任务监控：支持实时查看任务的执行状态及执行进度，执行时长，执行的客户端 IP、执行是否成功、执行失败原因等信息。更多...
常见问题
以下为您介绍实时同步数据至Hologres操作失败的常见问题和解决方案。PolarDB数据源网络联通性测试失败怎么办？Oracle数据源网络联通性测试失败怎么办？MySQL数据源网络联通性测试失败怎么办？实时任务，运行报错：...
DeployDISyncTask
发布实时同步任务和同步解决方案任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
DataStudio侧实时同步任务配置
操作流程 步骤一：创建实时同步节点 步骤二：配置资源组 步骤三：配置整库实时同步任务 步骤四：提交并发布实时同步任务 步骤一：创建实时同步节点 创建业务流程。详情请参见：创建业务流程。创建实时同步节点。你可以通过以下两种方式创建...
- 产品推荐
- 这些文档可能帮助您