实时同步任务告警设置最佳实践
指标4：Failover 报警监控原理与适用场景 配置建议 Failover指标是指当实时同步进程发生异常退出时，为提升进程可靠性，数据集成控制服务会重新拉起进程尝试恢复失败退出同步进程，进而提升同步进程可靠性。如果关注任务Failover信息，可以...
添加或移除单元节点
Interrupt（遇到冲突，任务报错退出）当数据同步遇到主键冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到主键冲突时，直接跳过当前同步语句...
PolarDB MySQL版间的双向同步
当数据同步遇到上述冲突类型时，同步任务直接报错并退出，同步任务进入失败状态，需要用户介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到上述的冲突类型时，直接跳过当前同步语句，继续往下执行，选择使用...
创建与释放全球多活数据库集群
Interrupt（遇到冲突，任务报错退出）当数据同步遇到主键冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到主键冲突时，直接跳过当前同步语句...
PolarDB MySQL版间的双向同步
当数据同步遇到上述冲突类型时，同步任务直接报错并退出，同步任务进入失败状态，需要用户介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到上述的冲突类型时，直接跳过当前同步语句，继续往下执行，选择使用...
MySQL实例间的双向同步
当数据同步遇到上述冲突类型时，同步任务直接报错并退出，同步任务进入失败状态，需要用户介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到上述的冲突类型时，直接跳过当前同步语句，继续往下执行，选择使用...
PolarDB-X 2.0间的双向同步
TaskFailed（遇到冲突，任务报错退出）当数据同步遇到冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到冲突时，直接跳过当前同步语句，继续往...
RDS PostgreSQL间的双向同步
TaskFailed（遇到冲突，任务报错退出）当数据同步遇到冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到冲突时，直接跳过当前同步语句，继续往...
RDS PostgreSQL间的双向同步
TaskFailed（遇到冲突，任务报错退出）当数据同步遇到冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到冲突时，直接跳过当前同步语句，继续往...
PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步
TaskFailed（遇到冲突，任务报错退出）当数据同步遇到冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到冲突时，直接跳过当前同步语句，继续往...
MySQL实例间的双向同步
TaskFailed（遇到冲突，任务报错退出）当数据同步遇到冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到冲突时，直接跳过当前同步语句，继续往...
RDS MySQL与PolarDB MySQL版间的双向同步
TaskFailed（遇到冲突，任务报错退出）当数据同步遇到冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到冲突时，直接跳过当前同步语句，继续往...
MySQL实例间的双向同步
TaskFailed（遇到冲突，任务报错退出）当数据同步遇到冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到冲突时，直接跳过当前同步语句，继续往...
云数据库MongoDB版（分片集群架构）间的双向同步
TaskFailed（遇到冲突，任务报错退出）当数据同步遇到冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到冲突时，直接跳过当前同步语句，继续往...
云数据库MongoDB版（分片集群架构）间的双向同步
TaskFailed（遇到冲突，任务报错退出）当数据同步遇到冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您介入修复任务。Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到冲突时，直接跳过当前同步语句，继续往...
Reserve参数说明
interrupt：当数据同步遇到冲突时，同步任务直接报错并退出，同步任务进入失败状态，需要您手动修复任务。ignore：当数据同步遇到冲突时，直接跳过当前同步语句，继续往下执行，选择使用目标库中的冲突记录。filterDDL 否 双向同步任务是否...
MaxCompute数据离线同步至ClickHouse
同步任务失败退出：出于ClickHouse稳定性考虑，可以选择写入异常时任务失败退出，通过配置告警及时知晓并人工介入处理相关异常。批量数据计入脏数据：如果想要保证任务运行完成并可接受批量数据丢弃，可选择将批量数据计入脏数据，通过脏...
离线同步日志分析
基于切分键切分产生的取数SQL，可能会由于切分键设置不合理，导致取数SQL在数据库执行时间过长导致同步整体耗时过长，或在数据库执行超时导致同步任务被迫中断退出。如果数据库当前负载过高，也可能会导致任务执行变慢。后置准备 系统将...
离线同步能力说明
脏数据个数控制 数据集成默认允许脏数据产生，支持您对同步过程中产生的脏数据个数设置阈值，并定义其影响：当不允许脏数据产生时，则同步任务执行过程中如果产生脏数据，任务将失败退出。当允许脏数据并设置其阈值时：若产生的脏数据在...
创建同步任务
您可以在同步任务配置时，控制同步过程中是否允许脏数据产生，并且支持控制脏数据条数，即当脏数据超过指定条数时，任务失败退出。分布式处理能力 用于控制是否开启分布式模式来执行当前任务。开启：分布式执行模式可以将您的任务切片分散...
通过脚本模式配置离线同步任务
您可以在同步任务配置时，控制同步过程中是否允许脏数据产生，并且支持控制脏数据条数，即当脏数据超过指定条数时，任务失败退出。说明 任务整体同步速度除受到上述配置影响外，还受源端数据源性能，同步网络环境等多方面影响，关于同步...
通过向导模式配置离线同步任务
您可以在同步任务配置时，控制同步过程中是否允许脏数据产生，并且支持控制脏数据条数，即当脏数据超过指定条数时，任务失败退出。分布式处理能力 用于控制是否开启分布式模式来执行当前任务。开启：分布式执行模式可以将您的任务切片分散...
MySQL整库离线同步到OSS
退出报错：同步任务停止执行。更多参数：若文件类型是 text 和 csv 格式，支持配置更多参数来完成定制化行为。配置 全增量控制。在 全量同步 中选择 周期性。单击 周期调度参数配置 设置对应的调度参数。调度参数详情请参见 调度参数支持的...
已加入企业管理
退出企业 在已加入企业页面，单击退出企业，即可进行主动退出企业操作：完整输入企业名称后单击确定。重要 退出企业后，不可恢复，请务必和企业管理员确认后再进行操作。无法主动退出企业的情况 情况一：当你是对应 企业的拥有者 时，需要...
同步方案选取指南
当您在使用关系型数据库（RDS）遇到查询慢的问题时，可将RDS中的数据同步至阿里云Elasticsearch进行查询分析。...例如：当出现ECS重启，Canal异常退出等场景时如何继续同步数据等。通过Canal将MySQL数据同步到阿里云Elasticsearch
高级：单点登出 SLO
用户经过 IDaaS SSO 登录应用后，当用户希望退出登录时，可以在应用侧发起全局退出，将 IDaaS 主登录会话同步终止。IDaaS 通过 OIDC SLO 标准实现这一流程，当前仅限“自研应用”和“OIDC 协议应用”可用。 说明 提示：SLO 是身份联邦的...
Serverless应用指南
例如，ECS重启时Canal异常退出。通过Canal将MySQL数据同步到阿里云ES 将日志数据同步到阿里云ES Serverless应用 logstash 开发脚本：java restclient、python client等。对迁移数据实时性要求不高的场景 迁移全量数据的场景。建议Logstash...
DataStudio侧实时同步任务配置
当不允许脏数据产生时，则同步任务执行过程中如果产生脏数据，任务将失败退出。当允许脏数据时：同步任务将忽略脏数据（即不会写入目标端），并正常执行。单击 完成配置。步骤四：提交并发布实时同步任务 单击工具栏中的 图标，保存节点。...
使用MongoShake实现MongoDB实例间的延迟同步
incr_sync.target_delay=1800 保存并退出collector.conf文件，至此延迟同步架构已经搭建完毕。执行如下命令使用配置好的collector.conf文件开启同步，并打印日志信息。collector.linux-conf=collector.conf-verbose 说明 此时您在主实例中...
离线同步常见问题
本文为您介绍离线同步的相关问题。文档概述 问题分类 相关文档 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步...
实时同步能力说明
支持定义脏数据及对任务的影响 当不允许脏数据产生时，则同步任务执行过程中如果产生脏数据，任务将失败退出。当允许脏数据并设置其阈值时，同步任务将忽略脏数据（即不会写入目标端），并正常执行。说明 脏数据相关介绍详情请参见：基本...
数据集成概述
您可以在同步任务配置时，控制同步过程中是否允许脏数据产生，并且支持控制脏数据条数，即当脏数据超过指定条数时，任务失败退出。由于脏数据原因导致离线/实时任务失败，同步任务之前已经成功写入的数据并不会回滚撤销。数据集成为了提升...
同步方案概览
全量数据同步 增量数据同步 单向同步 RDS MySQL同步至自建Oracle PolarDB-X 1.0 全量数据同步 增量数据同步 单向同步 从RDS MySQL同步至PolarDB-X PolarDB-X 2.0 库表结构同步 全量数据同步 增量数据同步 单向同步 RDS MySQL同步至PolarDB-...
数据同步方案概览
数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文将介绍数据同步功能支持的数据库、同步类型和同步拓扑。收费策略 DTS数据同步...
查看数据同步项目的详情
启动数据同步项目后，您可以在数据同步项目的详情页面查看相应项目的基本信息、同步详情和同步对象等信息。进入详情页面 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据同步。单击目标数据同步项目的名称，进入详情页面，...
极速同步
您可以使用极速同步功能，将OSS Bucket中的数据变化极速同步至所有通过文件网关连接至该Bucket的本地客户端。前提条件 已创建文件网关并添加缓存。具体操作，请参见 创建文件网关 及 添加缓存。已创建OSS Bucket。具体操作，请参见 创建...
支持的数据库
全量数据同步 增量数据同步 单向同步 RDS MySQL同步至自建Oracle PolarDB-X 1.0 全量数据同步 增量数据同步 单向同步 从RDS MySQL同步至PolarDB-X PolarDB-X 2.0 库表结构同步 全量数据同步 增量数据同步 单向同步 RDS MySQL同步至PolarDB-...
【邀测】同步备份
本文介绍同步备份功能，同步备份是一项方便、高效的云存储功能，支持 云与本地数据双向实时同步，实现多终端设备数据保持最终一致。功能特点 云-端数据双向同步：在本地存储和编辑的最新文件/文件夹实时同步至云端，云端已上传及更新的文件...
注册中心同步
新增Nacos-Nacos同步任务 在 新增同步任务 页面，填写同步任务相关配置信息：参数 说明 同步集群 选择已新建的同步集群。具体操作，请参见 注册中心同步集群。源注册中心 根据需要，选择已新建的注册中心作为源注册中心。具体操作，请参见 ...
同账号同步实例
若您想实现跨地域的镜像同步，可以通过配置同步规则，将容器镜像从源实例同步至目标实例。前提条件 同步实例时，请确保您的源实例为标准版或高级版，基础版的源实例不支持同步实例。目标实例可以是基础版、标准版或高级版。说明 您可以在...
- 产品推荐
- 这些文档可能帮助您