使用DataWorks(离线与实时)

费用说明 使用DataWorks数据集成进行数据同步时,需使用DataWorks的数据集成资源组与调度资源组,您可根据需要选择使用公共资源组或独享资源组,同时在数据传输过程中如果使用了公网传输,可能会涉及公网流量费用。各项可能费用的详情请...

产品架构

本文将介绍数据传输服务的整个系统架构及基本实现原理。系统架构 DTS系统架构特性说明 系统高可用 数据传输服务内部每个模块都有主备架构,保证系统高可用。容灾系统实时检测每个节点的健康状况,一旦发现某个节点异常,会将链路快速切换到...

计费方式

数据传输服务DTS(Data Transmission Service)不同实例支持的计费方式不同,本文详细介绍了DTS产品的计费方式。说明 DTS产品的计费项,请参见 计费项。计费方式 支持的实例 说明 包年包月 数据订阅实例 数据同步实例 也称为预付费,即在...

迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...

本文为您介绍如何使用数据传输迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输将主动...

工作原理

工作原理 本地安装一个数据库网关代理(database gateway agent)。数据库网关代理负责与数据库网关云端服务(database gateway cloud service)建立安全的、可信任的通道。不同账号、不同网关所建立的通道彼此隔离。通道建立后,当您...

什么是DTS Serverless实例

DTS Serverless实例是数据传输服务DTS(Data Transmission Service)提供的资源规格可以弹性变化的实例。Serverless实例可以适应不断变化的业务需求,使实例资源能够随业务规模的变化自动调整,从而避免资源浪费和控制运维成本。背景信息 ...

源为PolarDB-X的功能规范和约束说明

概览 业务设计规范 数据库架构规范 运维变更规范 数据质量风险声明 业务开发的数据质量工作 业务设计规范 表都需要有主键,否则可能会造成数据不一致(造成目标库有重复数据)。因为 PolarDB分布式版 的GSI全局二级索引(Global Secondary ...

源为PolarDB-X的功能规范和约束说明

概览 业务设计规范 数据库架构规范 运维变更规范 数据质量风险声明 业务开发的数据质量工作 业务设计规范 表都需要有主键,否则可能会造成数据不一致(造成目标库有重复数据)。因为 PolarDB分布式版 的GSI全局二级索引(Global Secondary ...

RDS实例间的数据迁移

本文介绍如何使用数据传输服务(Data Transmission Service,简称DTS),实现RDS实例间的数据迁移。DTS支持结构迁移、全量数据迁移以及增量数据迁移,同时使用这三种迁移类型可以实现在自建应用不停服的情况下,平滑地完成数据库的迁移。...

概述

正向切换是数据迁移必不可少的一个流程,通过正向切换,数据传输可以确保完成了数据正向迁移的相关工作,并且您可以根据业务需求启动反向增量组件。正向切换主要涉及的工作如下:您需要自行确认已完成数据迁移,并等待正向同步延迟被追平。...

新建同步节点并运行后上线

数据同步节点,实现不同云计算资源之间的数据传输。本文介绍如何新建数据同步节点并运行。操作步骤 步骤一:登录节点任务设置页面 登录企业数据智能平台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,...

新建同步节点并运行后上线

数据同步节点,实现不同云计算资源之间的数据传输。本文介绍如何新建数据同步节点并运行。操作步骤 步骤一:登录节点任务设置页面 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组...

数据集成概述

离线(批量)的数据通道通过定义数据来源和去向的数据源和数据集,提供一套抽象化的数据抽取插件(Reader)、数据写入插件(Writer),并基于此框架设计一套简化版的中间数据传输格式,从而实现任意结构化、半结构化数据源之间数据传输。...

RDS实例间数据迁移

本文介绍如何使用数据传输服务(Data Transmission Service,简称DTS),实现RDS实例间的数据迁移。DTS支持结构迁移、全量数据迁移以及增量数据迁移,同时使用这三种迁移类型可以实现在自建应用不停服的情况下,平滑地完成数据库的迁移。...

查看数据迁移项目的详情

正向切换是数据迁移必不可少的一个流程,通过正向切换,数据传输可以确保完成了数据正向迁移的相关工作,并且您可以根据业务需求启动反向增量组件。正向切换主要涉及的工作如下:您需要自行确认已完成数据迁移,并等待正向同步延迟被追平。...

数据集成

数据源支持情况 数据集成目前支持40种以上的数据源类型(包括关系型数据库、非结构化存储、大数据存储、消息队列等),通过定义来源与去向数据源,并使用数据集成提供的数据抽取插件(...,实现任意结构化、半结构化数据源之间的数据传输...

使用ETL分析实时订单

在 购买 页面,选择 链路规格 和 计算资源,阅读并勾选 数据传输(按量付费)服务条款 和 公测协议条款。说明 公测期间,每个用户可以免费创建并使用两个ETL实例。单击 购买并启动,ETL任务正式开始。任务运行结果 本案例中,ETL任务的启动...

常见问题

您在使用数据传输服务DTS(Data Transmission Service)时。如果收到DTS返回的错误信息,可查阅 常见报错 匹配解决方案。如果您没有收到具体的错误信息,请根据问题分类匹配问题和解决方案。问题分类 常见问题分为如下几种类型:计费问题 ...

配置订阅任务(新控制台)

数据传输服务DTS(Data Transmission Service)提供的数据订阅功能简单易用,您只需在控制台上进行简单操作,即可完成数据订阅任务的配置。注意事项 本文仅简单介绍数据订阅任务的通用配置流程,不同的数据源在配置数据订阅任务时略有不同...

使用DTS迁移分片集群架构的自建MongoDB数据库上云

本文介绍如何使用数据传输服务DTS(Data Transmission Service),依次将本地MongoDB分片集群数据库中的各个Shard节点,迁移至阿里云MongoDB分片集群实例来实现迁移上云。通过DTS的增量迁移功能,可以实现在本地应用不停服的情况下,平滑...

数据同步简介

基本原理 类似于 MySQL 的 binlog 机制,数据同步服务器和客户端 SDK 之间传递的基本数据单元为 oplog,当业务需要同步一个变更数据到指定的用户或设备时,业务调用数据同步接口,数据同步服务端会将业务需要同步的数据变更包装为一个 ...

从这里开始

区块:区块是基于基础组件封装的一个黑盒工具,可以定义内部外部的数据传输,对内可以封装业务相关的组件样式、组件布局、默认数据(不包含除静态数据和API外的数据源)和蓝图逻辑,对外可定义业务相关的区块数据接口。资源管理 设计资源:...

数据同步流程

数据传输提供数据同步功能,帮助您实现数据源之间的数据实时同步。适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步项目。完成准备工作。...

数据迁移流程

数据传输提供数据迁移功能,帮助您实现同构或异构数据源之间的数据迁移。适用于数据库升级、跨实例数据迁移、数据库拆分、扩容等业务场景。您可以参考以下流程进行迁移前的准备工作、以及购买、配置和管理数据迁移项目。完成准备工作数据...

创建RDS MySQL数据订阅通道

登录 数据传输控制台。在左侧导航栏,单击 数据订阅。在 数据订阅列表 页面上方,选择订阅通道所属地域。定位至已购买的数据订阅通道,单击 配置订阅通道。配置数据订阅的源库信息和网络类型。类别 配置 说明 无 订阅名称 DTS会自动生成...

创建DMS逻辑库的数据订阅任务

在左侧导航栏,选择 数据传输(DTS)>数据订阅。说明 实际操作可能会因DMS的模式和布局不同,而有所差异。更多信息,请参见 极简模式控制台 和 自定义DMS界面布局与样式。您也可以登录 新版DTS订阅任务的列表页面。在 订阅任务 右侧,选择...

创建Oracle数据订阅通道

登录 数据传输控制台。在左侧导航栏,单击 数据订阅。在 数据订阅列表 页面上方,选择订阅通道所属地域。定位至已购买的数据订阅通道,单击 配置订阅通道。配置数据订阅的源库信息和网络类型。类别 配置 说明 无 订阅名称 DTS会自动生成...

创建PolarDB MySQL版数据订阅任务

通过数据订阅功能,您可以实时订阅增量数据,轻松帮助业务实现轻量级缓存更新、业务异步解耦、含ETL逻辑的数据实时同步等场景。本文介绍如何创建 PolarDB MySQL版 数据订阅任务。前提条件 已创建 PolarDB MySQL版 集群,详情请参见 购买...

创建PolarDB PostgreSQL版数据订阅任务

在左侧导航栏,选择 数据传输(DTS)>数据订阅。说明 实际操作可能会因DMS的模式和布局不同,而有所差异。更多信息,请参见 极简模式控制台 和 自定义DMS界面布局与样式。您也可以登录 新版DTS订阅任务的列表页面。在 订阅任务 右侧,选择...

创建RDS MySQL数据订阅任务

通过数据订阅功能,您可以实时订阅源库的增量数据,轻松帮助业务实现轻量级缓存更新、业务异步解耦、含ETL逻辑的数据实时同步等场景。本文将介绍如何创建 RDS MySQL 数据订阅任务。前提条件 已创建源 RDS MySQL 实例,创建方式,请参见 ...

创建PolarDB PostgreSQL版(兼容Oracle)数据订阅任务

在左侧导航栏,选择 数据传输(DTS)>数据订阅。说明 实际操作可能会因DMS的模式和布局不同,而有所差异。更多信息,请参见 极简模式控制台 和 自定义DMS界面布局与样式。您也可以登录 新版DTS订阅任务的列表页面。在 订阅任务 右侧,选择...

创建PolarDB-X 2.0数据订阅任务

在左侧导航栏,选择 数据传输(DTS)>数据订阅。说明 实际操作可能会因DMS的模式和布局不同,而有所差异。更多信息,请参见 极简模式控制台 和 自定义DMS界面布局与样式。您也可以登录 新版DTS订阅任务的列表页面。在 订阅任务 右侧,选择...

创建RDS PostgreSQL数据订阅任务

在左侧导航栏,选择 数据传输(DTS)>数据订阅。说明 实际操作可能会因DMS的模式和布局不同,而有所差异。更多信息,请参见 极简模式控制台 和 自定义DMS界面布局与样式。您也可以登录 新版DTS订阅任务的列表页面。在 订阅任务 右侧,选择...

创建PolarDB-X 1.0数据订阅任务

在左侧导航栏,选择 数据传输(DTS)>数据订阅。说明 实际操作可能会因DMS的模式和布局不同,而有所差异。更多信息,请参见 极简模式控制台 和 自定义DMS界面布局与样式。您也可以登录 新版DTS订阅任务的列表页面。在 订阅任务 右侧,选择...

从这里开始

我的区块:区块是基于基础组件封装的一个黑盒工具,可以定义内部外部的数据传输,对内可以封装业务相关的组件样式、组件布局、默认数据(不包含除静态数据和API外的数据源)和蓝图逻辑,对外可定义业务相关的区块数据接口。设计资产:设计...

创建Oracle数据订阅任务

通过数据订阅功能,您可以实时订阅源库的增量数据,轻松帮助业务实现轻量级缓存更新、业务异步解耦、含ETL逻辑的数据实时同步等场景。本文为您介绍如何创建Oracle数据订阅任务。前提条件 自建Oracle数据库的版本为9i、10g、11g版本,暂不...

OceanBase(MySQL模式)迁移至PolarDB MySQL版

PolarDB MySQL版 集群是具备高性能、海量存储、安全可靠的数据库服务,本文为您介绍如何使用数据传输服务DTS(Data Transmission Service)将OceanBase数据库迁移至 PolarDB MySQL版 集群。前提条件 源OceanBase数据库需为社区版,且为4.X ...

OceanBase(MySQL模式)迁移至RDS MySQL

数据传输服务DTS(Data Transmission Service)支持将OceanBase数据库迁移至 RDS MySQL 实例,帮助您解决数据库运维的烦恼。前提条件 源OceanBase数据库需为社区版,且为4.X 版本。已创建存储空间须大于源OceanBase数据库的目标 RDS MySQL ...

配置数据订阅任务

数据订阅功能可以帮助您获取数据库的实时增量数据,您可以根据自身业务需求自由消费增量数据,并写入任意目标端,适配各类业务场景,例如缓存更新、业务异步解耦、异构数据数据实时同步及含复杂ETL的多种业务场景。本文将介绍在DTS专属...

恢复全量数据

订正在线数据 恢复到新实例后,您可使用数据传输DTS将需要的部分或全部库表数据 迁移至原实例 以订正原实例在线数据。说明 创建 数据迁移 任务时,请将已恢复的新实例作为源库,将原实例作为目标库,接入方式 均选择 云实例。相关操作 本文...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云数据库 RDS 数据库备份 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用