自建PostgreSQL同步至PolarDB PostgreSQL版（兼容...
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
同步时源库为MySQL的注意事项及限制
云原生数据仓库AnalyticDB MySQL 2.0 云原生数据仓库AnalyticDB MySQL 3.0 云原生数据仓库AnalyticDB PostgreSQL Elasticsearch Tablestore PolarDB-X 2.0 Oracle PostgreSQL MySQL间的同步 MySQL同步至PolarDB MySQL版 MySQL同步至云原生...
自建PostgreSQL同步至RDS PostgreSQL
在此期间（全量同步或增量同步过程中session_replication_role的参数值为replica），若源库存在级联更新、删除操作，则可能会导致数据不一致。在DTS同步任务释放后，您可以将session_replication_role的参数值改回origin。费用说明 同步...
自建PostgreSQL同步至RDS PostgreSQL
在此期间（全量同步或增量同步过程中session_replication_role的参数值为replica），若源库存在级联更新、删除操作，则可能会导致数据不一致。在DTS同步任务释放后，您可以将session_replication_role的参数值改回origin。费用说明 同步...
常见问题
数据同步过程中如果源实例中的数据库名、表名或者列名中含有划线（-）会报错吗？由于ADB中不允许数据库名、表名或者列名中含有划线（-），为保证数据同步成功，系统会将中划线（-）映射为下划线（_）。如果在数据同步过程中遇到其他因数据...
仓库同步
仓库同步过程中将不支持写入，请合理安排同步时间，特别是针对网络条件不佳或超大仓库的同步时，可能存在较长等待时间，你可以切换页面，同步完成后将向操作人发送邮件通知。说明 仓库同步超时时间为 10 分钟，超时将同步失败，可能提示...
同步时源库为Redis的注意事项及限制
同步过程中会过滤该Key，同步任务结束，该Key就会过期。如果源库为只读实例或者DTS账号没有写（SETEX）权限，上报的延迟可能不准确。为保障同步链路稳定性，建议将配置文件 redis.conf 中 repl-backlog-size 参数的值适当调大。请勿在源库...
通过一键建仓同步至数仓版
注意事项 数据同步过程中，若在源实例PolarDB MySQL中新增库，新增库数据不会自动同步，手动配置同步链路，请参见 手动配置。不要在数据同步过程中增加无主键表，将导致同步链路中断。同步链路中断7天后不再保证数据正确性，请及时处理链路...
通过一键建仓同步至数仓版
注意事项 数据同步过程中，若在源实例RDS MySQL中新增库，新增库数据不会自动同步，需要手动配置同步链路，请参见 手动配置。不要在数据同步过程中增加无主键表，将导致同步链路中断。同步链路中断7天后不再保证数据正确性，请及时处理链路...
Application同步选项
使用GitOps管理应用时，ArgoCD会提供一些同步选项，...Replace 在同步过程中，同步资源将使用 kubectl replace/create 而非 kubectl apply。相关文档 使用GitOps创建、部署应用，请参见 Application管理 或 使用ApplicationSet创建多个应用。
数据同步操作指导
新增同步对象、移除同步对象 在数据同步过程中，您可以新增或移除同步对象。配置监控报警 您可以对重要的监控指标设置报警规则，让您第一时间了解同步任务的状态。4.结束数据同步任务 如果不再需要数据同步，可结束数据同步任务。
通过向导模式配置离线同步任务
同步过程中可能存在源端与目标端字段类型不匹配，产生脏数据，导致数据无法正常写入目标端，同步过程中关于脏数据的容忍条数，请参考下一步 通道控制 进行配置。说明 当源端某字段未与目标端字段进行映射时，源端该字段数据将不会同步到...
数据集成概述
数据集成是稳定高效、弹性伸缩...在数据集成同步任务配置前，您可以在DataWorks 数据源管理 页面，配置好您需要同步的源端和目标端数据库或数据仓库的相关信息，并在同步过程中，通过选择数据源名称来控制同步读取和写入的数据库或数据仓库。
通过 SCIM 同步账户至云SSO
字段映射：用于展示和编辑 SCIM 同步过程中的字段映射关系，您可以根据自己的需求进行更改。6.测试连接 在配置完成保存后，我们建议您通过【测试连接】功能检查配置是否正确。若有需要，管理员可以通过【一键推送】功能，将在同步范围内的...
概述
数据同步过程中，数据源中的数据存储在目标数据仓库OSS中，搭建数据仓库过程中不会对数据源端的业务系统产生任何压力。通过DLA控制台配置建仓任务，支持自定义设置定时数据投递。极致的计算能力，充分发挥DLA的计算能力，通过DLA的大内存、...
通过 SCIM 同步账户至 RAM
字段映射：用于展示和编辑 SCIM 同步过程中的字段映射关系，可以根据您的具体需求进行修改。在配置完成保存后，我们建议您通过【测试连接】功能检查配置是否正确。若有需要，管理员可以通过【一键推送】功能，将在同步范围内的账户一次性...
PolarDB-X（DRDS）同步方案选取指南
需要确保Logstash和PolarDB-X实例在同一时区（避免同步过程中出现时间标记不符的情况）。需要确保Elasticsearch中的_id 字段与PolarDB-X中的_id 字段相同。当您在PolarDB-X中插入或更新数据时，需要确保对应记录有一个包含更新或插入时间的...
应用场景
在增量实时同步过程中，记录数据位点信息用于将后续的数仓数据标记完成，下游可依据标记完成时间触发后续的数据分析任务。场景三：查询分载/读能力横向扩展 在有大量读请求的场景，大量读取流量可能会对主流程业务产生影响，这时可以通过...
从ECS上的自建Redis同步至Redis实例
若在数据同步过程中源端Redis发生连接闪断导致断点续传失败，则可能会使全量数据重新同步至目标端，从而导致数据不一致。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。增量数据同步 收费，详情请参见 计费概述。...
账户同步-SCIM
字段映射 用于展示和编辑 SCIM 同步过程中的字段映射关系。在配置完成保存后，我们建议您通过【测试连接】功能检查配置是否正确。若有需要，管理员可以通过【一键推送】功能，将在同步范围内的账户一次性全部推送到应用中。注意事项 当前仅...
创建同步任务
您可以在同步任务配置时，控制同步过程中是否允许脏数据产生，并且支持控制脏数据条数，即当脏数据超过指定条数时，任务失败退出。分布式处理能力 用于控制是否开启分布式模式来执行当前任务。开启：分布式执行模式可以将您的任务切片分散...
API分组同步
重要 在同步过程中，请不要修改这些同步的API定义，避免造成数据混乱。2.分组同步 登录API网关控制台，在左侧栏单击 API管理，选择 分组管理，单击 分组API配置同步。同步前准备，可参考第一章节，确认已了解内容后单击进入下一步。选择...
通过image-syncer工具迁移容器镜像
除了使用重传机制规避同步过程中可能出现的偶发问题之外，image-syncer会在运行结束时统计最后同步失败的镜像个数，并且打印出详细的日志，帮助使用者定位同步过程中出现的问题。准备工作 使用image-syncer时，您只需要提供一个配置文件，...
通过image-syncer工具迁移容器镜像
除了使用重传机制规避同步过程中可能出现的偶发问题之外，image-syncer会在运行结束时统计最后同步失败的镜像个数，并且打印出详细的日志，帮助使用者定位同步过程中出现的问题。准备工作 使用image-syncer时，您只需要提供一个配置文件，...
从ECS上的自建Redis同步至Redis实例
警告 选择为 忽略报错并继续执行 后，如果在同步过程中遇到目标库中的Key与源库中的Key相同，会将源库的数据覆盖写入目标库中，请谨慎选择。同步对象 在 源库对象 框中单击待同步的数据库，然后单击 将其移动到 已选择对象 框。同步对象的...
通过脚本模式配置离线同步任务
您可以在同步任务配置时，控制同步过程中是否允许脏数据产生，并且支持控制脏数据条数，即当脏数据超过指定条数时，任务失败退出。说明 任务整体同步速度除受到上述配置影响外，还受源端数据源性能，同步网络环境等多方面影响，关于同步...
同步方案选取指南
需要确保Logstash和RDS在同一时区（避免同步过程中出现时间标记不符的情况）。需要确保Elasticsearch中的_id 字段与RDS中的 id 字段相同。当您在RDS中插入或更新数据时，需要确保对应记录有一个包含更新或插入时间的字段。通过Logstash将...
从通过专线、VPN网关或智能接...同步至ECS上的自建Redis
警告 选择为 忽略报错并继续执行 后，如果在同步过程中遇到目标库中的Key与源库中的Key相同，会将源库的数据覆盖写入目标库中，请谨慎选择。同步对象 在 源库对象 框中单击待同步的数据库，然后单击 将其移动到 已选择对象 框。同步对象的...
数据迁移和同步方案概览
同步过程中的注意事项及限制，请参见 同步时源库为MongoDB的注意事项及限制。重要 DTS暂不支持同步MongoDB 7.0版实例的数据。具体支持情况以DTS文档为准，请参见 支持的数据库。云数据库MongoDB支持通过云上灾备功能，实现MongoDB数据库间...
方案概述
本地数据中心通过物理专线和云企业网与云上专有网络实现私网通信后，通信流量未经过加密处理，无法满足安全通信的高要求。使用私网VPN网关可帮您实现基于物理专线的私网流量（以下简称为私网流量）加密通信，提高网络的安全性。本文为您...
离线同步任务调优
同步任务整体速度慢可能出现在同步过程的各个阶段，本文以现象入手，为您提供各个阶段运行慢的解决方案，详情请参见：数据同步慢的场景及解决方案。在数据库性能限制的情况下，同步速度并非越快越好，考虑到速度过高可能对数据库造成过大的...
通过SCIM同步Okta用户或用户组的示例
同步过程中如果遇到异常，您可以单击 View Logs 查看日志信息，帮助您解决问题。验证结果 登录 云SSO控制台。在用户或用户组列表中，查看同步成功的用户或用户组。同步的用户或用户组的 来源 会自动标识为 SCIM同步。具体操作，请参见 查看...
调用OpenAPI配置Redis企业版实例间单向或双向数据同步
您可以通过调用DTS的相关接口，为Redis企业版实例配置单向或双向数据同步。...新增同步对象/移除同步对象 在数据同步过程中，您可以新增或移除同步对象。配置监控报警 您可以对重要的监控指标设置报警规则，让您及时了解同步作业的状态。
查看和修改同步对象
背景信息 数据同步项目在同步过程中，满足限制条件的情况下，您可以增加或减少同步对象。每一次运行的修改行为都会被记录。当增加对象任务执行完成后，会与关联的原项目合并。合并成功后，原项目正常运行，增加对象任务会自动释放。使用...
钉邮绑定和通讯录同步
同步策略须知 同步过程分为两步：钉钉&邮箱部门同步：1）除顶级部门外，同层级同名字的部门，认为是需要建立关联的部门；2）通过同步Excel触发同步时，钉钉和邮箱侧的部门相互补齐，如果两侧出现多出来其下没有账号的不需要的部门，请手动...
Redis实例间的单向数据同步
警告 选择为 忽略报错并继续执行 后，如果在同步过程中遇到目标库中的Key与源库中的Key相同，会将源库的数据覆盖写入目标库中，请谨慎选择。同步对象 在 源库对象 框中单击待同步的数据库，然后单击 将其移动到 已选择对象 框。同步对象的...
Redis实例间的单向数据同步
警告 选择为 忽略报错并继续执行 后，如果在同步过程中遇到目标库中的Key与源库中的Key相同，会将源库的数据覆盖写入目标库中，请谨慎选择。同步对象 在 源库对象 框中单击待同步的数据库，然后单击 将其移动到 已选择对象 框。同步对象的...
离线同步数据质量排查
由Reader插件和Writer插件完成具体的数据同步过程，同步插件会遵循数据源本身的数据读写协议，以及数据读写规则（如数据约束等）。因此在检查源头、目标数据源的实际同步效果时，会受到实际数据读写协议、读写规则方面的影响。写端数据一致...
从自建Redis集群同步至Redis集群实例
警告 选择为 忽略报错并继续执行 后，如果在同步过程中遇到目标库中的Key与源库中的Key相同，会将源库的数据覆盖写入目标库中，请谨慎选择。同步对象 在 源库对象 框中单击待同步的数据库，然后单击 将其移动到 已选择对象 框。同步对象的...
从自建Redis集群同步至Redis集群实例
警告 选择为 忽略报错并继续执行 后，如果在同步过程中遇到目标库中的Key与源库中的Key相同，会将源库的数据覆盖写入目标库中，请谨慎选择。同步对象 在 源库对象 框中单击待同步的数据库，然后单击 将其移动到 已选择对象 框。同步对象的...
- 产品推荐
- 这些文档可能帮助您