数据同步

数据同步提供批量、实时多源异构数据的便捷同步或接入能力,系统提供完善的数据接入配置、任务运行监控等功能,有效保障数据接入的稳定性和可控性,满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、超图等...

数据同步

数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力,系统提供完善的数据接入配置、任务运行监控等功能,有效保障数据接入的稳定性和可控性,满足各类平台、数据源及应用系统间的数据汇聚需求。前提条件 已根据快速入门教程...

数据同步

数据同步是指数仓或者数据湖内的数据与上游业务库内的数据保持同步的状态。当上游业务库内的数据发生变更之后,下游的数仓/数据湖立即感知到数据变化,并将数据变化同步过来。在数据库中,这类场景称为Change Data Capture(CDC)场景。...

同步数据

本文介绍了多种同步数据的方式。分析型数据库MySQL版支持多种数据加载方式,包括但不限于:通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版,其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自...

数据同步概述

Dataphin支持通过数据同步的方式,将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单高效、安全...

数据同步概述

Dataphin支持通过数据同步的方式,将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单高效、安全...

实时数据同步

可应用于数据异地灾备、数据库扩缩容、跨境数据同步、查询与报表分流、云 BI(商业智能工具)及实时数据仓库等多种业务场景。支持的同步链路 数据源端 数据目的端 支持的拓扑 备注 MySQL Zsearch(云搜)单向同步 已支持 OceanBase ODPS、...

数据同步流程

数据传输提供数据同步功能,帮助您实现数据源之间的数据实时同步。适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步项目。完成准备工作。...

数据同步概述

常见数据源 Hologres内置同步方案 DataWorks数据集成方式同步数据 Flink方式同步数据 MaxCompute 支持(推荐,SQL命令)支持 支持 OSS 支持(推荐,SQL命令)支持 不支持 本地文件 支持(Copy命令)不支持 不支持 MySQL等数据库 不支持 ...

全量数据同步

通过选择已注册的数据源端数据和目标端,实现全量任务自动建表的方式创建离线同步周期任务,本文介绍如何创建MySQL to MaxCompute离线全量数据同步一次性调度的任务。前提条件 已新建工作组,具体操作,请参见 新建工作组。已在工作组中...

增量数据同步

通过选择已注册的数据源端数据和目标端,实现增量任务自动建表的方式创建离线同步周期任务,本文介绍如何创建MySQL to MaxCompute离线增量数据同步周期调度的任务。前提条件 已新建工作组“信息中心(xxzx)”,具体操作,请参见 新建工作...

数据同步模版

您可以使用数据同步模版帮您快速生成数据同步的Flink SQL作业代码。本文为您介绍如何使用多库多表同步或者分库分表合并模版实现数据同步。背景信息 Flink全托管支持多库多表同步和分库分表合并两种数据同步方式,二者的区别请参见下表。...

数据同步简介

数据同步是 mPaaS 平台的一个核心基础服务组件。数据同步源自蚂蚁集团内面向移动应用、从服务端到客户端进行海量数据推送的全链路解决方案—SYNC。该组件提供了一个安全的基于传输控制协议(Transmission Control Protocol,简称 TCP)和...

数据同步操作指导

数据同步使用流程 通常,使用数据传输服务DTS(Data Transmission Service)执行数据同步的操作,您需要经历如下步骤。操作流程 说明 1.准备工作概览 在使用DTS执行数据同步前,您需要对源或目标数据库做一些准备工作,以满足DTS对环境的...

结束数据同步作业

如果不再需要数据同步,您可以结束数据同步作业,停止将源库的数据变更同步至目标库。前提条件 数据同步作业处于 同步中、已暂停、同步失败、同步初始化中 或 同步初始化失败 状态。注意事项 结束数据同步作业后,数据同步作业将处于 已...

数据同步方案概览

数据同步功能帮助您实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文将介绍数据同步功能支持的数据库、同步类型和同步拓扑。收费策略 DTS数据同步...

DataX同步数据

DataX是异构数据源离线同步的工具,支持多种异构数据源之间高效的数据同步。Dataphin系统内嵌了DataX组件,支持通过构建Shell任务调用DataX,实现数据同步。本教程以RDS MySQL数据库为例,为您介绍基于Dataphin如何调用DataX同步数据。前提...

使用数据传输同步数据

数据同步能够保持源端和目标端的数据一致性,实现关键业务的数据实时流动。本文以同步 OceanBase 数据库的数据至 Kafka 为例,介绍如何使用数据传输同步数据。前提条件 在同步数据之前,您需要确认以下信息:数据传输已具备云资源访问权限...

配置数据同步任务

说明 源和目标RDS MySQL实例可以不同或相同,即您可以使用DTS实现两个RDS MySQL实例间的数据同步或同一RDS MySQL实例内的数据同步数据库账号 填入源 RDS MySQL 实例的数据库账号,需具备待同步对象的读权限。数据库密码 填入该数据库账号...

DataX同步数据

DataX是异构数据源离线同步的工具,支持多种异构数据源之间高效的数据同步。Dataphin系统内嵌了DataX组件,支持通过构建Shell任务调用DataX,实现数据同步。本教程以RDS MySQL数据库为例,为您介绍基于Dataphin如何调用DataX同步数据。前提...

购买数据同步项目

本文为您介绍如何购买云数据库 OceanBase 数据传输服务提供的数据同步项目。背景信息 目前数据同步项目仅支持预付费模式,即包年包月计费模式。您可以根据本文操作购买相应类型的数据同步项目后,再对项目进行具体配置和管理。数据同步项目...

新增数据同步任务

本文以 RDS 数据源到分布式搜索服务(云搜 ZSearch)的实时同步为例,介绍如何新增数据同步任务。操作步骤 进入数据同步服务控制台,在左侧导航栏中,选择 数据同步任务。单击 添加任务,选择 RDS 数据源同步到分布式搜索服务 的场景。开始...

数据同步方案概览

适用场景 文档链接 MySQL间数据同步 MySQL实例间的双向同步 RDS MySQL实例间的单向同步 从ECS上的自建MySQL同步至RDS 从通过专线、VPN网关或智能接入网关接入的自建MySQL同步至RDS 不同阿里云账号下RDS实例间的数据同步 从RDS MySQL同步至...

管理数据同步任务

数据同步任务创建完成后,对于不同状态下的任务,您可以进行相应的设置管理:编辑任务 暂停任务 取消任务 删除任务 编辑任务 您可以编辑 已暂停、已取消、异常 状态下的任务。操作步骤如下:在数据同步服务控制台,选择 数据同步任务,进入...

结束数据同步项目

本文为您介绍如何结束数据同步项目。使用限制 数据传输支持结束处于 已暂停、失败 和 已完成 状态的数据同步项目。操作步骤 项目结束后,仍保留当前项目的配置信息,您可以根据需要选择清空项目配置后重新配置。详情请参见 清空项目配置。...

数据同步方案概览

数据同步 使用场景 文档链接 PolarDB 间的数据同步 PolarDB MySQL集群间的单向同步 PolarDB MySQL集群间的双向同步 PolarDB 与其它数据库的数据同步 RDS MySQL同步至PolarDB MySQL集群 PolarDB MySQL同步至RDS MySQL 从PolarDB MySQL同步至...

全增量数据同步

本文主要介绍全增量数据同步的使用场景,功能列表,迁移优势,使用限制以及创建数据同步任务等操作。使用场景 大版本升级:HBase1.x升级HBase2.x。跨地域迁移:例如从青岛机房迁移到北京机房。跨账号迁移:支持不同账号迁移数据。集群升配...

重新配置数据同步作业

当您需要停止数据同步或重新配置数据同步时,您可以通过本文的方法来重置数据同步作业。前提条件 数据同步作业不处于 未配置 状态。费用影响 包年包月:无影响。按量付费:数据同步作业将转变为 未配置 状态并停止计费,再次完成数据同步...

上线离线数据同步任务

新增离线数据同步任务后,需对任务进行上线操作,同步任务上线后会按照创建同步任务中设置的调度周期执行。本文介绍如何上线离线数据同步任务。前提条件 已新增离线数据同步任务,具体操作,请参见 新增离线数据同步任务、批量新增离线数据...

数据同步拓扑介绍

数据同步功能支持多种同步拓扑,您可以根据业务需求规划您的同步实例。本文介绍DTS支持的同步拓扑类型和使用说明。单向同步 在单向同步的拓扑中,为保障同步数据的一致性,对目标实例中的同步对象应只进行读操作,请勿进行写操作。拓扑类型...

数据同步链路规格说明

本文介绍数据同步各链路规格的说明。注意事项 该性能规格参考的是测试数据,不作为产品SLA的评判标准。使用DTS可实现数据秒级同步到目标实例,但受限于源实例的运行负载、传输网络的带宽、网络延时、目标实例写入性能等多种因素的影响,DTS...

新增离线数据同步任务

数据同步支持离线数据同步任务的新建。离线数据同步任务支持的云计算资源类型为MySQL、Oracle、SQL Server、Hdfs、ftp、PostgreSQL、Hive、MaxCompute、AnalyticDB PostgreSQL、OSS。本文以同步MySQL数据源到MaxCompute目标端为例,介绍...

快速入门-数据同步

您可以通过云备份控制台将NAS、HDFS、OSS和S3源端数据同步至目的端。本文介绍该场景涉及的主要步骤。使用 云备份 控制台进行数据同步的步骤如下所示:说明 同步HDFS、本地NAS、S3和OSS数据源前,您需要在数据源所在服务器安装客户端。客户...

上线离线数据同步任务

新增离线数据同步任务后,需对任务进行上线操作,同步任务上线后会按照创建同步任务中设置的调度周期执行。本文介绍如何上线离线数据同步任务。前提条件 已新增离线数据同步任务,具体操作,请参见 新增离线数据同步任务、批量新增离线数据...

批量操作数据同步项目

本文为您介绍如何使用数据传输对数据同步项目进行批量操作。背景信息 数据传输支持在 同步项目列表 页面,对数据同步项目进行批量操作。不同状态的数据同步项目支持不同的批量操作。数据同步项目的状态 支持的批量操作 未配置 无 未启动 ...

数据同步作业怎么更改同步源实例

数据同步支持重新配置同步作业,如果您需要修改同步作业的源实例,那么可以使用 重新配置任务 功能,重新配置同步作业。

Redis数据同步方案概览

借助数据传输服务DTS(Data Transmission Service),云数据库Redis版 为您提供了丰富数据同步方案,可适用于同步上云、数据异地多活、数据容灾、数据分析等多种业务场景。DTS介绍 DTS 是阿里云提供的实时数据流服务,集数据迁移、订阅、...

新增离线数据同步任务

数据同步支持离线数据同步任务的新建。离线数据同步任务支持的云计算资源类型为MySQL、Oracle、SQL Server、Hdfs、ftp、PostgreSQL、Hive、MaxCompute、AnalyticDB PostgreSQL、OSS。本文以同步MySQL数据源到MaxCompute目标端为例,介绍...

申请跨境数据同步权限

阅读DTS跨境数据同步数据合规承诺,并勾选相应条款。单击 提交。说明 系统将自动进行审批,请刷新页面后继续操作。后续步骤 跨境数据同步权限开通后,您可以配置跨境数据同步任务。若您是在任务页面申请的跨境数据同步权限,可以继续配置跨...

查询数据同步操作记录

数据同步服务支持查询数据同步操作记录,包括新建配置、修改配置、删除配置、新建同步、上线配置、下线配置、开启签名、关闭签名的变更操作历史,以便进行操作溯源以及使用数据分析。查询操作历史记录的步骤如下:登录 mPaaS 控制台,进入...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据传输服务 数据库备份 DBS 阿里邮箱 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用