正向切换是数据迁移必不可少的一个流程,通过正向切换,数据传输可以确保完成了数据正向迁移的相关工作,并且您可以根据业务需求启动反向增量组件。正向切换主要涉及的工作如下:您需要自行确认已完成数据迁移,并等待正向同步延迟被追平。...
正向切换是数据迁移必不可少的一个流程,通过正向切换,数据传输可以确保完成了数据正向迁移的相关工作,并且您可以根据业务需求启动反向增量组件。正向切换主要涉及的工作如下:您需要自行确认已完成数据迁移,并等待正向同步延迟被追平。...
不同的实例规格对应了增量同步的不同 RPS 性能表现,以及建议迁移或同步的最大表对象数量,通过 OceanBase 数据传输服务可以实现数据秒级同步至目标端。但是受限于源端实例的运行负载、传输网络的带宽、网络延时和目标端实例写入性能等多种...
数据传输服务 您可以查看数据传输服务共享资源组与包年包月独享资源组的资源使用情况,并根据项目和需要观测的时间区间观测各个指标的使用情况。操作步骤 登录 MaxCompute控制台,在左上角选择地域。在左侧导航栏单击 资源观测。在 资源...
开启同步 DDL 功能后,当您使用 DDL 语句在源端创建一张新表或者修改一张表结构时,如果对应的表名在迁移/同步对象规则和排除对象规则的差集内,则该 DDL 语句可以被数据传输同步至目标端。库表汇聚场景下:建议您使用导入对象或匹配规则的...
适用场景 默认情况下,被迁移或同步的对象(例如数据库、表等)在源端和目标端的名称相同,您可以通过数据传输提供的对象名称重命名功能,设置被迁移或同步的对象在目标端的名称,实现源端和目标端之间数据库的库名、表名的映射。...
数据传输DTS:数据传输服务(Data Transmission Service)DTS支持关系型数据库、NoSQL、大数据(OLAP)等数据源间的数据传输。它是一种集数据迁移、数据订阅及数据实时同步于一体的数据传输服务。数据传输致力于在公共云、混合云场景下,...
(可选)主账号授予 RAM 用户数据传输迁移角色授权权限 RAM 用户需要具备数据传输迁移角色 AliyunOceanbaseMigrationServiceRolePolicy,才可以正常访问数据传输。如果 RAM 用户未具备该角色,则需要主账号先登录 RAM 控制台,手动给数据...
您在使用数据传输服务DTS(Data Transmission Service)时。如果收到DTS返回的错误信息,可查阅 常见报错 匹配解决方案。如果您没有收到具体的错误信息,请根据问题分类匹配问题和解决方案。问题分类 常见问题分为如下几种类型:计费问题 ...
当您在MaxCompute中需要对大规模数据进行传输且对传输稳定性和延迟有要求时,您可以使用独享数据传输服务资源组。独享数据传输服务资源组可以提供更高的数据传输速度和更好的网络条件,以减少传输时间并提高效率。本文为您介绍如何购买、...
区块可以定义内部外部的数据传输,对内可以封装业务相关的组件样式、组件布局、默认数据(不包含除静态数据和API外的数据源)和蓝图逻辑,对外可定义业务相关的区块数据接口。说明 区块功能为 专业版 及以上版本功能,如果您需要使用此功能...
数据传输独享资源费用(包年包月)MaxCompute为所有用户提供免费的 公共数据传输服务资源组,您也可以购买 独享数据传输服务资源组,以独享数据传输服务,可使用更多数据传输并发数,保障资源的独享性的同时提高了输出传输的稳定性。数据...
选择 Topic 数据传输提供查询 DataHub Topic 的能力,您可以单击 选择 Topic,在 已有 Topic 下拉列表中,搜索并选中需要同步的 Topic。批量生成 Topic 批量生成 Topic 的规则为 Topic_${Database Name}_${Table Name}。如果您选择 新建 ...
如果您已购买包年包月规格的独享数据传输服务资源组,并想要在业务高峰期临时扩容部分并发资源满足资源供给,可使用按时计费规格。本文为您介绍按时计费规格的计费说明、使用说明及资源价格。背景信息 MaxCompute支持对数据传输服务的独享...
本文为您介绍如何在数据传输中新建 PostgreSQL 数据源。前提条件 已创建 RDS PostgreSQL 实例。详情请参见 创建 RDS PostgreSQL 实例。重要 数据传输不支持 Serverless 模式实例和只读实例。操作步骤 登录 OceanBase 管理控制台。在左侧...
问题原因 SDK运行的服务器没有公网IP,不能连接数据传输服务的服务器,或者因为订阅通道的消费时间点不在订阅通道的数据范围之内。解决方案 创建公网IP,建立SDK的公网连接,或者重新修改消费位点,具体的修改方法详见 修改订阅通道消费...
如果数据正常消费,那么数据传输控制台的消费位点就会正常往前走。
本文为您介绍如何使用数据传输迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输...
本文为您介绍如何在数据传输中新建云原生数据仓库 AnalyticDB MySQL 版(简称 ADB)数据源。背景信息 ADB 的基本介绍请参见 基础数据类型。ADB 的建表、分区表和分布表的详情请参见 CREATE TABLE。OceanBase 数据库 MySQL 租户至 ADB 的...
本文介绍不同名账号存在性检查失败的处理办法。...说明 当前阿里云数据传输产品(DTS)不支持同一实例上多账号配置多迁移任务的模式。解决办法 请登录数据传输产品(DTS)控制台,重新配置任务,确保同一账号发起多个任务。
本文为您介绍如何使用数据传输提供的列过滤功能。操作步骤 将数据同步项目配置至 选择同步对象 步骤。详情请参见相应类型的 数据同步 项目文档。选择同步对象和映射方式后,在 选择同步范围 区域右侧的 目标端对象 列表中,鼠标悬停至目标...
Kettle(Tunnel通道系列)Kettle是一款开源的ETL工具,纯Java实现,可以在Windows、Unix和Linux上运行,提供图形化的操作界面,可以通过拖拽控件的方式,方便地定义数据传输的拓扑。详情请参见 基于Kettle的MaxCompute插件实现数据上云。...
问题原因 一般是由于数据传输服务连接不上源Oracle数据库。解决方案 当遇到此问题时,需要在安装Oracle的服务器上执行 netstat-ano 命令,查看Oracle数据库的端口是否配置了内外网IP监听。如果没有配置,那么需要修改Oracle的监听服务,...
本文为您介绍如何在数据传输中新建 DataHub 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框中,选择 数据源类型 为 DataHub。...
背景信息 数据传输的安全问题,贯穿服务连通性验证、链路创建和数据传输过程。基于 Kafka 服务提供的安全体系,数据传输在数据加密和用户认证上均有一定的支持,以满足绝大部分安全需求。数据传输支持的 Kafka 认证方式包括:GSSAPI GSSAPI...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 Oracle 租户的增量数据至 MySQL 数据库。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输将...
概述 本文主要介绍MySQL中数据类型为Date的数据,通过数据订阅传输数据后,数据格式由 YYYY-MM-DD 格式变化为 YYYY:MM:DD 的原因。详细信息 DTS默认数据存储格式为 YYYY:MM:DD,YYYY-MM-DD 是展现出来的格式,实际...适用于 数据传输服务 DTS
本文为您介绍如何使用数据传输迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输将主动...
问题描述 DTS控制台数据迁移页面,迁移任务显示锁定中。问题原因 阿里云账号欠费,同时未及时续费。解决方案 正常续费即可,如何续费DTS请参考如下文档。续费包年包月实例 适用于 数据传输服务 DTS
背景信息 在数据传输控制台创建从 OceanBase 数据库 Oracle 租户迁移数据至 Oracle 数据库的数据迁移项目,您可以通过结构迁移、全量迁移和增量同步,无缝迁移源端数据库中的存量业务数据和增量数据至 Oracle 数据库。同时,数据传输支持将...
本文为您介绍如何使用数据传输迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输...
本文为您介绍如何在数据传输中新建 TiDB 数据源。前提条件 已获取相关数据库的 IP 地址和端口号。已存在用于数据迁移的数据库用户。建议您为数据迁移项目创建一个专属的数据库用户,该用户必须具备相关的数据操作权限。详情请参见 创建 ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL 数据库。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输将主动...
本文为您介绍如何在数据传输新建 MySQL 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框中,选择 数据源类型 为 MySQL。配置...
本文为您介绍如何在数据传输中新建 Oracle 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框中,选择 数据源类型 为 Oracle。...
本文为您介绍如何使用数据传输迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输将主动释放...
问题描述 订阅通道无法修改消费位点。问题原因 因为订阅通道还有下游消费。解决方案 登录 DTS控制台 查看消费来源IP,查看是否还有下游SDK在消费数据,如果有,那么需要先停止下游消费后,重新修改消费位点。...适用于 数据传输服务DTS
RDS MySQL通过数据传输服务(DTS)可以实现主实例和异地灾备实例之间的实时同步。主实例和灾备实例均搭建主备高可用架构,当主实例所在区域发生突发性自然灾害等状况,主实例(Master)和备实例(Slave)均无法连接时,可将异地灾备实例...
数据传输的数据同步功能可以帮助您实现 OceanBase 数据库的物理表和 RocketMQ 数据源之间的数据实时同步,扩展消息处理能力。同步 OceanBase 数据库的数据至 RocketMQ 时,两种租户对应的数据格式请参见 数据库传输到文本协议的格式说明。...
DTS实例到期或欠费后,数据传输任务将停止服务,如果7天内还未充值成功,系统将释放并删除该任务。警告 实例到期或欠费后有停机风险,系统会通知您,请及时续费或充值,避免对您的服务造成影响。实例计费类型 到期或欠费的影响 包年包月 ...