一键实时同步至MaxCompute
数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute引擎同步数据通道SLA评估数据同步业务技术选型。一键实时同步至MaxCompute，按实例模式同步时...
一键实时同步至MaxCompute
数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute引擎同步数据通道SLA评估数据同步业务技术选型。一键实时同步至MaxCompute，按实例模式同步时...
配置并管理实时同步任务
数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute引擎同步数据通道SLA评估数据同步业务技术选型。创建实时同步任务 创建整库实时同步节点。配置...
MaxCompute数据源
数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute引擎同步数据通道SLA评估数据同步业务技术选型。一键实时同步至MaxCompute，按实例模式同步时...
阿里邮箱AD同步&认证
三、实现场景对比 支持的三类场景：只做同步不做认证、只做认证不做同步、既做同步又做认证。三类场景略有区别，且有需要特别注意的地方。场景 区别 只做同步 1.user的userPrincipalname可以与登录的邮箱地址不一致。2.不能同步密码，同步...
库表同步
库表同步 中的模板如下所示：检测点 模板 结构同步校验「结构同步」设置测试库同步免批「结构同步」关闭SQL执行能力「结构同步」关闭线上库的SQL执行能力「结构同步」设置线上库同步的审批流程 影子表同步校验「影子表同步」设置测试库同步...
查询DTS任务列表及各任务执行详情
DbObject String {"dtstestdata":{"name":"dtstestdata","all":true }} 迁移、同步或订阅对象，详细定义说明，请参见 迁移、同步或订阅对象说明。DtsJobClass String large 链路规格。说明 关于各链路规格的说明及性能测试情况请参见 数据...
钉邮绑定和通讯录同步
如确认无需做架构同步，可以直接关闭截止目前的操作页面，回到钉钉OA管理后台，在首页快捷入口中找到 企业邮箱 进入，查看绑定的结果。如下是接下来的同步页面，如需同步具体请见下方 同步操作步骤；STEP2、给钉钉账号分配企业邮箱 情况一...
使用DataWorks
创建业务流程 在DataWorks上创建业务流程，为创建离线同步任务做准备。创建离线同步节点 在创建的业务流程基础上，创建离线同步节点。通过向导模式配置并运行数据同步任务 或 通过脚本模式配置并运行数据同步任务 以可视化或脚本模式配置并...
通过数据同步功能同步Kafka至湖仓版（推荐）
AnalyticDB for MySQL 湖仓版（3.0）支持新建Kafka同步链路，通过同步链路从指定时间位点，实时同步Kafka中的数据入湖，以满足近实时产出、全量历史归档、弹性分析等需求。本文主要介绍如何添加Kafka数据源，新建Kafka同步链路并启动任务，...
数据集成侧同步任务能力说明
DataWorks为您提供多种数据源之间进行不同数据同步场景的全增量同步任务，包括实时数据同步、离线全量同步、离线增量同步等同步场景，助力企业数据更高效、更便捷的一键上云。背景信息 实际业务场景下，数据同步通常不能通过一个或多个简单...
实时同步常见问题
本文为您介绍实时同步的相关问题。文档概述 问题分类 相关文档 实时同步任务配置须知 实时同步任务支持哪些数据源？为什么实时同步任务延迟较大？实时同步任务延迟解决方案 实时同步任务为什么不建议使用公网？实时同步字段格式问题 实时...
MySQL分库分表实践
背景信息 实际业务场景下数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个离线同步、实时同步和数据处理等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。尤其是在MySQL分库分表的场景下，上游的...
MySQL分库分表同步至MaxCompute
背景信息 实际业务场景下数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个离线同步、实时同步和数据处理等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。尤其是在MySQL分库分表的场景下，上游的...
MySQL分库分表同步至MaxCompute
背景信息 实际业务场景下数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个离线同步、实时同步和数据处理等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。尤其是在MySQL分库分表的场景下，上游的...
使用DTS同步
配置 说明 选择同步对象 在 源库对象 框中单击待同步的表（不能超过64个表），然后单击 图标将其移动至 已选择对象 框。默认情况下，同步对象的名称保持不变。如果您需要同步对象在目标实例上名称不同，请使用对象名映射功能。具体操作，请...
同步时源库为MongoDB的注意事项及限制
源库为MongoDB的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：MongoDB（副本集架构）同步至MongoDB（副本集架构、分片集群架构）MongoDB（分片集群架构）间双向同步 MongoDB（分片集群架构）间单向同步 MongoDB（副本集...
MySQL分库分表同步至Hologres（方案2.0）
背景信息 实际业务场景下数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个离线同步、实时同步和数据处理等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。尤其是在MySQL分库分表的场景下，上游的...
管理时间同步服务
管理时间同步服务 阿里云公共镜像中包含了默认的时间同步配置，基于公共镜像创建的ECS实例会默认运行Chrony或者NTP服务进行时间同步，正常情况下您无需干预时间同步服务。您可以按照以下步骤，检查当前ECS实例的时间同步服务是否正常，并...
云数据库MongoDB版（分片集群架构）间的双向同步
MongoDB分片集群为源的单向同步不支持源端做分片的扩缩容，双向同步源和目标都不支持分片数量的扩缩容，否则会导致DTS任务失败。源MongoDB分片集群实例的Mongos节点的数量不能超过10个。暂不支持同步包含TTL（Time To Live）索引的集合。若...
云数据库MongoDB版（分片集群架构）间的双向同步
MongoDB分片集群为源的单向同步不支持源端做分片的扩缩容，双向同步源和目标都不支持分片数量的扩缩容，否则会导致DTS任务失败。源MongoDB分片集群实例的Mongos节点的数量不能超过10个。暂不支持同步包含TTL（Time To Live）索引的集合。若...
RDS SQL Server同步至RDS MySQL
如在 配置任务对象及高级配置 时选择 SQLServer增量同步模式 为 解析源库日志做增量同步，则待同步的表需具备聚集索引，且聚集索引中需包含主键列；待同步的表不支持堆表、无主键表、压缩表、含计算列表。在混合式日志解析模式下，没有如上...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
如在 配置任务对象及高级配置 时选择 SQLServer增量同步模式 为 解析源库日志做增量同步，则待同步的表需具备聚集索引，且聚集索引中需包含主键列；待同步的表不支持堆表、无主键表、压缩表、含计算列表。在混合式日志解析模式下，没有如上...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE 说明 不...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE 说明 不...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
如在 配置任务对象及高级配置 时选择 SQLServer增量同步模式 为 解析源库日志做增量同步，则待同步的表需具备聚集索引，且聚集索引中需包含主键列；待同步的表不支持堆表、无主键表、压缩表、含计算列表。在混合式日志解析模式下，没有如上...
自建SQL Server同步至PolarDB MySQL版
如在 配置任务对象及高级配置 时选择 SQLServer增量同步模式 为 解析源库日志做增量同步，则待同步的表需具备聚集索引，且聚集索引中需包含主键列；待同步的表不支持堆表、无主键表、压缩表、含计算列表。在混合式日志解析模式下，没有如上...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
如在 配置任务对象及高级配置 时选择 SQLServer增量同步模式 为 解析源库日志做增量同步，则待同步的表需具备聚集索引，且聚集索引中需包含主键列；待同步的表不支持堆表、无主键表、压缩表、含计算列表。在混合式日志解析模式下，没有如上...
CREATE TABLE AS（CTAS）语句
通过CTAS语句，在实时同步数据的同时，还能实时将上游表结构（Schema）的变更同步到下游表，提高您在目标存储中创建表和维护源表结构变更的效率。本文为您介绍CREATE TABLE AS（CTAS）的使用方法，并提供了多种使用场景下的示例。前提条件 ...
RDS SQL Server间的同步
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 说明 不支持同步仅更新...
RDS SQL Server同步至云原生数据仓库AnalyticDB ...
如在 配置任务对象及高级配置 时选择 SQLServer增量同步模式 为 解析源库日志做增量同步，则待同步的表需具备聚集索引，且聚集索引中需包含主键列；待同步的表不支持堆表、无主键表、压缩表、含计算列表。在混合式日志解析模式下，没有如上...
离线同步常见问题
本文为您介绍离线同步的相关问题。文档概述 问题分类 相关文档 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步...
常见问题
为什么增量同步任务不能同步数据？如果DTS实例只配置了增量同步任务，则DTS只会同步任务启动之后的增量数据，任务启动前的数据不会同步至目标库。建议配置任务时同时勾选 增量同步、库表结构同步 和 全量同步，以保障数据一致性。同步RDS...
RDS MySQL同步至阿里云消息队列Kafka版
如果已经是在同步中的任务，则需要修改同步对象，将该表移出，再次点击修改同步对象，加入该表，并将该表的大字段列过滤，不做同步。支持的同步架构 一对一单向同步。一对多单向同步。多对一单向同步。关于各类同步架构的介绍及注意事项，...
RDS MySQL同步至阿里云消息队列Kafka版
如果已经是在同步中的任务，则需要修改同步对象，将该表移出，再次点击修改同步对象，加入该表，并将该表的大字段列过滤，不做同步。支持的同步架构 一对一单向同步。一对多单向同步。多对一单向同步。关于各类同步架构的介绍及注意事项，...
PolarDB数据源配置
同步方式选择 自动同步，OpenSearch将尽力保障同步服务的稳定性但不保障同步的延迟，如果对同步延迟比较敏感的业务建议同步方式采用 DTS数据订阅实例（DTS实时同步）；相关限制 只支持PolarDB集群的binlog为 full 模式。开启方式为：loose_...
CREATE DATABASE AS（CDAS）语句
说明 在将数据同步到Hologres时，如果您的上游源表包含了 Fixed Plan 不支持类型的数据，建议通过 INSERT INTO语句 的方式，在Flink内部做类型转换后将数据同步到Hologres。不要用CDAS方式创建Sink结果表进行数据同步，因为这种方式会无法...
源为PolarDB-X的任务配置方案
该方案相比于直接配置 PolarDB分布式版 至目标实例的同步或迁移任务，更能保障性能和稳定性。重要 该方案仅支持表级别同步或迁移。推荐您使用方案一，其在性能、稳定性方面均优于方案二，且对 PolarDB分布式版 下挂载的RDS MySQL数量没有...
源为PolarDB-X的任务配置方案
该方案相比于直接配置 PolarDB分布式版 至目标实例的同步或迁移任务，更能保障性能和稳定性。重要 该方案仅支持表级别同步或迁移。推荐您使用方案一，其在性能、稳定性方面均优于方案二，且对 PolarDB分布式版 下挂载的RDS MySQL数量没有...
PolarDB数据源配置
若配置了RDS/PolarDB数据源，并且同步方式选择 自动同步，OpenSearch将尽力保障同步服务的稳定性但不保障同步的延迟，如果对同步延迟比较敏感的业务建议同步方式采用 DTS数据订阅实例（DTS实时同步）；相关限制 只支持PolarDB集群的binlog...
- 产品推荐
- 这些文档可能帮助您