通过无锁变更工单实现无锁结构变更

为解决变更数据库表结构时的锁表问题,数据管理DMS 推出了无锁结构变更功能,该功能可以较好地规避因锁表以致于阻塞业务和数据库原生OnlineDDL带来的主备延迟问题。本文介绍通过提交无锁变更工单实现数据库无锁结构变更的方法。前提条件 ...

功能特性

数据模型 表结构变更 您可以对云数据库 SelectDB 版数据库表结构进行调整以适应新的业务需求。表结构变更 实时分析 倒排索引 您需要快速检索云数据库 SelectDB 版中的大量文本数据时,本文档将指导您如何创建和使用倒排索引,以支持您的...

无锁结构变更

背景信息 为解决变更数据库表结构时的锁表问题,ODC V4.2.0 版本提供了无锁结构变更功能,该功能可以较好地规避因锁表以致于阻塞业务。本文档旨在介绍如何通过提交无锁变更工单实现数据库无锁结构变更。ODC 支持的在线结构变更 分类 操作 ...

无锁结构变更概览

适用场景 变更数据库表结构。变更表的字符集和校验集、调整时区等。规避Optimize Table操作回收表空间、降低碎片率引起的锁表。具体操作,请参见 无锁结构变更回收碎片空间。支持的数据库类型 RDS MySQL、PolarDB MySQL版、MyBase MySQL、...

如何对JSON类型进行高效分析

设计关系型数据库表结构时一般尽量避免使用大宽表,因为过多的列往往加重IO和内存负担而影响性能,例如即使只需要少部分列数据时仍然要读取整个行而导致大量无效IO,一般会考虑通过拆分表或使用关联表等方式来优化表结构。对于列存来说大宽...

通过Kafka导入数据

默认是同步所有数据库和表 database.include.list=test table.include.list=test.test_table database.history.kafka.bootstrap.servers=localhost:9092#用于存储数据库表结构变化的 Kafka topic database.history.kafka.topic=dbhistory ...

数据方案概览

环境构建 数据库克隆 支持将源数据库表结构和表数据复制至目标数据库中,实现全部表或部分表备份,适用多环境数据库初始化。测试数据构建 提供根据字段类型按照多种规则,自动化构建数据的能力。数据追踪/提供数据库Binlog日志的解析处理...

初始化

数据管理DMS 的空库初始化功能支持将源数据库表结构同步至空数据库中(数据库中不存在任何表),实现快速同步数据库表结构,适用部署多区域、多单元的数据库环境。前提条件 支持的数据库类型如下:MySQL:RDS MySQL、PolarDB MySQL版、...

管理表结构版本

当您在 数据管理DMS 中对数据库进行表结构变更后,DMS将会保存最新的表结构数据库版本列表中。您可以在数据库版本列表中下载、对比、恢复历史版本的表结构。前提条件 您具有该表(或库)的查询权限,更多信息,请参见 查看我的权限。...

Smartbi

本文列出了Smartbi与 AnalyticDB MySQL版 在连通性、列举数据库、查询表数据等方面的兼容性。测试环境 Smartbi试用地址为 登录Smartbi。...测试范围 连接 AnalyticDB MySQL版 集群数据库 列举数据库 查看表结构 查看表数据

数据库克隆

数据管理DMS的数据库克隆功能支持将源数据库表结构和表数据复制至目标数据库中,实现全部表或部分表备份,适用多环境数据库初始化,例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同,且都为MySQL。数据库实例的...

导出数据

本文将为您介绍如何导出表结构、SQL查询结果集、整个数据库。前提条件 数据库关联的安全规则已开启 结果集是否支持导出 规则(系统默认开启)。更多信息,请参见 SQL窗口-关系型数据库。具有目标数据库的查询、导出等权限。更多信息,请...

功能特性

结构同步 空库初始化 支持将源数据库表结构同步至空数据库中(数据库中不存在任何表),实现快速同步数据库表结构,适用部署多区域、多单元的数据库环境。空库初始化 表一致性修复 用于对比不同表之间的表结构,找出差异并在目标表执行...

迁移数据库账号

即在 配置任务对象及高级配置 阶段中,同步类型 勾选了 库表结构同步 或者 迁移类型 勾选了 库表结构迁移。注意事项 当前仅MySQL实例(含RDS MySQL和自建MySQL)间的同步或迁移实例,支持将源的账号迁移至目标。说明 目标RDS MySQL实例...

从自建MySQL迁移至MyBase MySQL

数据库表结构迁移 全量迁移 增量迁移 ECS自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移:待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW MyBase MySQL实例 读写权限 数据库账号创建及授权方法:自建...

表结构发布流程化

提交执行后请等待审批完成,待审批完成后,系统会将新的表结构写入到dev_database数据库中。可选:前往 SQL Console 插入数据或提交 数据变更工单 对dev_database数据库进行测试。插入数据示例代码如下:insert into teacher(teacher_id,...

自建MySQL迁移至PolarDB MySQL版

数据库表结构迁移 全量迁移 增量迁移 自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移:待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW 建库建表的权限,以允许DTS创建库dts,用于记录迁移期间的心跳...

从自建MySQL迁移至RDS MySQL实例

TRUNCATE TABLE 数据库账号的权限要求 数据库表结构迁移 全量迁移 增量迁移 自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移:待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW 建库建表的权限,以允许...

三节点企业系列的RDS MySQL迁移到集群系列的RDS MySQL

注意事项 说明 在库表结构迁移过程中,DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中,DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作,可能会导致数据不一致。...

PolarDB-X 2.0迁移至云原生数据仓库 AnalyticDB MySQL...

注意事项 说明 在库表结构迁移过程中,DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中,DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作,可能会导致数据不一致。...

三节点企业版的RDS MySQL迁移到PolarDB-X 2.0标准版

如为增量迁移任务,DTS要求源数据库的本地Binlog日志保存24小时以上,如为全量迁移和增量迁移任务,DTS要求源数据库的本地Binlog日志至少保留7天以上(您可在全量迁移完成后将Binlog保存时间设置为24小时以上),否则DTS可能因无法获取...

配置数据迁移任务

注意事项 说明 在库表结构迁移过程中,DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中,DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作,可能会导致数据不一致。...

MyBase MySQL迁移至RDS MySQL

重要 任务使用的源和目标数据库账号,需要具有元数据mysql.user、mysql.db、mysql.columns_priv、mysql.tables_priv的SELECT权限。目标库已存在的账号和系统账号(如root、mysql.infoschema、mysql.session、mysql.sys等)不支持迁移。源...

自建MySQL迁移至RDS MySQL

TRUNCATE TABLE 数据库账号的权限要求 数据库表结构迁移 全量迁移 增量迁移 自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移:待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW 建库建表的权限,以允许...

RDS MySQL实例间的迁移

注意事项 说明 在库表结构迁移过程中,DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中,DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作,可能会导致数据不一致。...

PolarDB-X 2.0间的迁移

注意事项 说明 在库表结构迁移过程中,DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中,DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作,可能会导致数据不一致。...

自建MySQL迁移至PolarDB MySQL版

TRUNCATE TABLE 数据库账号的权限要求 数据库表结构迁移 全量迁移 增量迁移 自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移:待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW 建库建表的权限,以允许...

三节点企业系列的RDS MySQL迁移到集群系列的RDS MySQL

注意事项 说明 在库表结构迁移过程中,DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中,DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作,可能会导致数据不一致。...

RDS MySQL迁移至AnalyticDB MySQL 3.0

注意事项 说明 在库表结构迁移过程中,DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中,DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作,可能会导致数据不一致。...

RDS MySQL迁移至云原生数据仓库 AnalyticDB ...

RDS MySQL实例 MySQL自建数据库:有公网IP的自建数据库 ECS上的自建数据库 通过数据库网关接入的自建数据库 通过云企业网CEN接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 说明 本文以 RDS MySQL 实例为源数据库介绍配置...

MongoDB(无分片键)迁移至MongoDB(分片集群架构)

迁移类型说明 迁移类型 说明 库表结构迁移 将源 云数据库MongoDB版 中迁移对象的结构迁移到目标 云数据库MongoDB版 中。说明 支持结构迁移的对象为DATABASE、COLLECTION、INDEX。全量迁移 将源 云数据库MongoDB版 迁移对象的存量数据全部...

数据库MongoDB版(副本集架构)迁移至云数据库...

支持的源和目标数据库数据库(副本集架构)目标数据库(副本集架构、分片集群架构)云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能...

自建MariaDB迁移至RDS MariaDB

TRUNCATE TABLE 数据库账号的权限要求 数据库表结构迁移 全量迁移 增量迁移 自建MariaDB数据库 SELECT权限 SELECT权限 增量数据迁移:待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW 建库建表的权限,以允许...

新功能发布记录

当您在数据管理DMS中对数据库进行表结构变更后,DMS将会保存最新的表结构数据库版本列表中。您可以在数据库版本列表中下载、比对、恢复历史版本的表结构。管理表结构版本 超级SQL模式 新增 开启超级SQL模式后,管理员和DBA在SQLConsole中...

实施步骤

通过DTS实时同步PolarDB for MySQL数据到分析型数据库MySQL版...如果需要同步的表数量较少且分析型数据库MySQL版表结构与源表差异较大,可以在分析型数据库MySQL版中提前 创建表,配置同步链路 时需要把步骤7中的中 结构初始化 选项去掉即可。

数据库MongoDB版(单节点架构)全量迁移至云数据库...

数据库(单节点架构)目标数据库(所有架构)云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 有公网IP的自建数据...

将MySQL数据迁移到Redis

关系型数据库中库表结构的数据无法直接传入以键值结构保存数据的Redis数据库,迁移前需要将源端数据转换为特定的结构。这篇最佳实践以MySQL向Redis整表迁移为例,介绍如何通过原生工具进行简单高效地迁移。MySQL的表数据将通过Redis ...

ACL权限体系

以下列出AnalyticDB for MySQL 2.0的权限对象和各对象权限:Database(库),即 db_name.*或*(默认数据库),指定数据库数据库上所有/组。TableGroup(组),即 db_name.table_group_name 或 table_group_name,特定组。Table...

Spark SQL

登录 DLA控制台,单击左侧导航栏的 SQL执行,您可以看到所有数据湖中的数据库表结构,对表进行在线分析查询,以及管理子用户对库表的权限,如下图所示。纯SQL作业 DLA Spark支持直接在控制台写Spark SQL。无需用户打包jar包或者写python...

支持的数据库

增量数据同步 单向同步 RDS MySQL同步至函数计算FC 云数据库SelectDB版 库表结构同步 全量数据同步 增量数据同步 单向同步 RDS MySQL同步至云数据库SelectDB版 源为PolarDB MySQL版的同步方案 重要 PolarDB-X 1.0中的数据库须基于RDS MySQL...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云数据库 Redis 版 云数据库 MongoDB 版 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用