数据方案概览
空库初始化 支持将源数据库的表结构同步至空数据库中，实现快速同步数据库表结构。表一致性修复 用于对比不同表之间的表结构，找出差异并在目标表执行差异脚本，以保障不同表之间的表结构一致性 无锁结构变更 可以较好地规避因锁表以致于...
通过无锁变更工单实现无锁结构变更
为解决变更数据库表结构时的锁表问题，数据管理DMS 推出了无锁结构变更功能，该功能可以较好地规避因锁表以致于阻塞业务和数据库原生OnlineDDL带来的主备延迟问题。本文介绍通过提交无锁变更工单实现数据库无锁结构变更的方法。前提条件 ...
无锁结构变更
背景信息 为解决变更数据库表结构时的锁表问题，ODC V4.2.0 版本提供了无锁结构变更功能，该功能可以较好地规避因锁表以致于阻塞业务。本文档旨在介绍如何通过提交无锁变更工单实现数据库无锁结构变更。ODC 支持的在线结构变更 分类 操作 ...
无锁结构变更概览
适用场景 变更数据库表结构。变更表的字符集和校验集、调整时区等。规避Optimize Table操作回收表空间、降低碎片率引起的锁表。具体操作，请参见 无锁结构变更回收碎片空间。支持的数据库类型 RDS MySQL、PolarDB MySQL版、MyBase MySQL、...
通过Kafka导入数据
默认是同步所有数据库和表 database.include.list=test table.include.list=test.test_table database.history.kafka.bootstrap.servers=localhost:9092#用于存储数据库表结构变化的 Kafka topic database.history.kafka.topic=dbhistory ...
数据库克隆
数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化，例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同，且都为MySQL。数据库实例的...
迁移数据库账号
即在 配置任务对象及高级配置 阶段中，同步类型 勾选了 库表结构同步 或者 迁移类型 勾选了 库表结构迁移。注意事项 当前仅MySQL实例（含RDS MySQL和自建MySQL）间的同步或迁移实例，支持将源库的账号迁移至目标库。说明 目标RDS MySQL实例...
从自建MySQL迁移至MyBase MySQL
数据库 库表结构迁移 全量迁移 增量迁移 ECS自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移：待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW MyBase MySQL实例 读写权限 数据库账号创建及授权方法：自建...
表结构发布流程化
提交执行后请等待审批完成，待审批完成后，系统会将新的表结构写入到dev_database数据库中。可选：前往 SQL Console 插入数据或提交 数据变更工单 对dev_database数据库进行测试。插入数据示例代码如下：insert into teacher(teacher_id,...
自建MySQL迁移至PolarDB MySQL版
数据库 库表结构迁移 全量迁移 增量迁移 自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移：待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW 建库建表的权限，以允许DTS创建库dts，用于记录迁移期间的心跳...
PolarDB MySQL版8.0.1版本发布日志
新增参数 innodb_polar_import_tablespace_strict_mode，默认值为 ON，即执行库表恢复操作时，表结构中包含full-text index会报错。支持使用列存索引查询分区表中指定分区的数据。SQL Trace支持采样具体的SQL语句。2023-07-05 问题修复 ...
三节点企业系列的RDS MySQL迁移到集群系列的RDS MySQL
注意事项 说明 在库表结构迁移过程中，DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
数据扫描和识别
在MaxCompute、数据库的表结构发生变化后（仅指数据表的列有新增或删减），会触发自动扫描并扫描有变化的列；数据表的行发生变化不会触发自动扫描。对该数据源中的所有数据收取全量扫描费用。在OSS文件新增和修改后会触发自动扫描。说明 ...
三节点企业版的RDS MySQL迁移到PolarDB-X 2.0标准版
如为增量迁移任务，DTS要求源数据库的本地Binlog日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量迁移完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法获取...
MyBase MySQL迁移至RDS MySQL
重要 任务使用的源和目标数据库账号，需要具有元数据表mysql.user、mysql.db、mysql.columns_priv、mysql.tables_priv的SELECT权限。目标库已存在的账号和系统账号（如root、mysql.infoschema、mysql.session、mysql.sys等）不支持迁移。源...
实施步骤
通过DTS实时同步PolarDB for MySQL数据到分析型数据库MySQL版...如果需要同步的表数量较少且分析型数据库MySQL版表结构与源表差异较大，可以在分析型数据库MySQL版中提前 创建表，配置同步链路 时需要把步骤7中的中 结构初始化 选项去掉即可。
迁移方案概览
库表结构迁移 全量数据迁移 增量数据迁移 PolarDB MySQL版迁移至Elasticsearch MaxCompute 库表结构迁移 全量数据迁移 增量数据迁移 PolarDB MySQL版迁移至MaxCompute 云数据库SelectDB版 库表结构迁移 全量数据迁移 增量数据迁移 PolarDB ...
同步方案概览
增量数据同步 单向同步 RDS MySQL同步至函数计算FC 云数据库SelectDB版 库表结构同步 全量数据同步 增量数据同步 单向同步 RDS MySQL同步至云数据库SelectDB版 源为PolarDB MySQL版的同步方案 重要 PolarDB-X 1.0中的数据库须基于RDS MySQL...
创建数据库
若要使用云数据库RDS，您需要在实例中创建数据库。...如果您使用 一键上云 等迁移方式将本地自建数据库迁移上云时，表空间将与本地自建数据库表空间名称相同，支持将数据库和表的表空间修改为 pg_default。下一步 连接PostgreSQL实例。
通过Mongo Shell管理数据库账号
roles":[{"role":"readAnyDatabase","db":"admin"}]} 查询目标数据库的所有数据库账号 说明 您可以通过 use database_name 命令切换数据库，其中 database_name 为目标数据库的名称。方式一：在目标数据库执行查询命令。show users 说明 ...
通过DMS管理数据库账号
语法：db.getCollection("system.users").find({db:"database_name"})参数说明：database_name 为目标数据库的名称。示例：db.getCollection("system.users").find({db:"admin"})返回结果如下：{ '_id':"admin.root",'userId':BinData(3,"b...
USE
背景信息 PolarDB-X 支持访问同一 PolarDB-X 实例下的多个不同的数据库，就如同单机MySQL的跨数据库查询。通常，PolarDB-X 登录时需要指定一个DB_NAME作为默认数据库。您可以使用USE语句动态切换当前Schema，方便同时管理多个数据库。语法 ...
USE
背景信息 PolarDB-X 1.0 支持访问同一 PolarDB-X 1.0 实例下的多个不同的数据库，就如同单机MySQL的跨数据库查询。通常，PolarDB-X 1.0 登录时需要指定一个DB_NAME作为默认数据库。您可以使用USE语句动态切换当前Schema，方便同时管理多个...
系统角色
角色 说明 权限 普通用户 使用数据库进行数据查询与变更、表结构查看与变更等操作。可以是企业的研发人员、测试人员、产品人员、运营人员、数据分析师等。主账号下的子账号默认为普通用户。不可查看实例管理、用户管理、任务管理、配置管理...
搜索
数据库 可组合查询数据库名，如：DB1 DB2 DB3。操作类型 选择需要查询的操作类型，可多选。说明 您可 开启高级查询 输入更多信息以缩小搜索范围。单击 查询，即可看到 日志列表 中 SQL语句 的具体信息。说明 单击 导出，勾选需要的 导出...
常用 SQL 命令（MySQL）
数据库相关 命令 示例 创建数据库并指定字符集 create database db01 DEFAULT CHARACTER SET gbk COLLATE gbk_chinese_ci;删除数据库 drop database db01;账号相关 说明 一个具有高权限账号的实例，不能通过高权限账号修改其他账号的密码。...
PolarDB-X 1.0在DMS控制台上无法显示修改后的表结构
问题描述 使用阿里云云原生分布式数据库PolarDB-X 1.0过程中，通过其他客户端修改表结构后，在DMS控制台上无法显示修改后的表结构。解决方案 DMS会从影子库系统表中获取 PolarDB-X 1.0 的表结构。在处理异常DDL过程中，由于种种原因可能会...
概述
使用限制 开启SQL防火墙功能后，Proxy会在您当前的集群中创建一个数据库 database:proxy_auditing 和两张表，其中，sql_list 表用于保存黑白名单规则中的参数化SQL语句，org_sql_list 表用于保存黑名单规则中具体的SQL语句。且每张表最多...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
不同库名间的数据同步或迁移
数据传输服务DTS（Data Transmission Service）支持在配置数据同步或迁移任务时对数据（库、表、列）的名称进行映射，以设置任务对象在目标库实例中的名称。您可以通过该功能将数据同步或迁移到目标库中指定的数据库、数据表或字段（列），...
如何解决增量迁移延迟或同步延迟
本案例以MySQL数据库为例，介绍锁状态和慢SQL、库表结构的查询方式，以及对应解决方式。锁状态和慢SQL：使用命令 SHOW PROCESSLIST;查询锁表或者慢SQL进程，然后执行命令 KILL[CONNECTION|QUERY]thread_id 删除该进程。库表结构：使用命令 ...
Db2 for LUW同步至PolarDB-X 2.0
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 数据库同步至 PolarDB分布式版。前提条件 已创建源 Db2 for LUW 数据库和目标 PolarDB分布式版 实例，支持的版本，请参见 同步方案概览。说明 PolarDB分布式版 需兼容...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
背景
业务接入流程 当您有一块业务需要使用表格存储作为数据库时，通常会经历几个过程：了解表格存储（场景案例和文档），业务需求分析，直接对照方案实现、方案设计及编码实现（表结构和查询），接入业务数据测试上线。根据业务场景能否直接...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
如何对JSON类型进行高效分析
设计关系型数据库表结构时一般尽量避免使用大宽表，因为过多的列往往加重IO和内存负担而影响性能，例如即使只需要少部分列数据时仍然要读取整个行而导致大量无效IO，一般会考虑通过拆分表或使用关联表等方式来优化表结构。对于列存来说大宽...
命令行界面
clear[database|db|retention policy|rp]清除当前数据库或保留策略的上下文。connect在不退出Shell的情况下，连接到其它服务器。默认情况下，influx 连接到 localhost:8086。如果您没有指定host或者port，influx 假设未指定的参数使用默认...
PolarDB MySQL版迁移至Elasticsearch
注意事项 说明 在库表结构迁移过程中，DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
PolarDB MySQL版同步至RDS MySQL
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
mysqldump
使用示例 导出 导出test_db数据库中的test_table表：mysqldump-h127.0.0.1-P9030-uroot-no-tablespaces-databases test_db-tables test_table 导出test_db数据库中的test_table表结构：mysqldump-h127.0.0.1-P9030-uroot-no-tablespaces-...
- 产品推荐
- 这些文档可能帮助您