空库初始化
数据管理DMS 的空库初始化功能支持将源数据库的表结构同步至空数据库中（数据库中不存在任何表），实现快速同步数据库表结构，适用部署多区域、多单元的数据库环境。前提条件 支持的数据库类型如下：MySQL：RDS MySQL、PolarDB MySQL版、...
数据库克隆
数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化，例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同，且都为MySQL。数据库实例的...
导出数据
本文将为您介绍如何导出表结构、SQL查询结果集、整个数据库。前提条件 数据库关联的安全规则已开启 结果集是否支持导出 规则（系统默认开启）。更多信息，请参见 SQL窗口-关系型数据库。具有目标数据库的查询、导出等权限。更多信息，请...
迁移数据库账号
即在 配置任务对象及高级配置 阶段中，同步类型 勾选了 库表结构同步 或者 迁移类型 勾选了 库表结构迁移。注意事项 当前仅MySQL实例（含RDS MySQL和自建MySQL）间的同步或迁移实例，支持将源库的账号迁移至目标库。说明 目标RDS MySQL实例...
数据扫描和识别
在MaxCompute、数据库的表结构发生变化后（仅指数据表的列有新增或删减），会触发自动扫描并扫描有变化的列；数据表的行发生变化不会触发自动扫描。对该数据源中的所有数据收取全量扫描费用。在OSS文件新增和修改后会触发自动扫描。说明 ...
数据建模诊断
分区字段合理性诊断可以帮助用户监控分区的变化，当分区不合理时及时提醒用户进行表结构的优化，保持或者提高实例的查询性能。分区字段不合理判定规则 如果表中有10%以上的分区记录条数不在合理区间则视为不合理，具体的判定规则见下表：...
库表结构优化
库表结构的设计和优化对数据库整体使用成本和查询性能的影响尤其显著。要做好库表结构设计和优化，用户通常需要关注以下信息：数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点，才能结合业务的数据分布特征与业务场景特征，...
管理表结构版本
在 数据库版本列表 页面，找到目标版本号，您可以进行如下操作：操作 说明 查看 查看表结构的详情信息。预览脚本 查看表结构的SQL脚本。表结构对比 将表结构同步至其他表结构或与其他表结构进行对比，更多信息，请参见 结构同步。结构恢复 ...
结构同步
数据管理DMS 的结构同步功能支持对比不同数据库、指定表之间的表结构，产生差异化脚本并执行到目标数据库。适用于对比、同步多套数据库环境的表结构，例如生产库与测试库、不同的测试库、不同的生产库等。前提条件 支持的数据库类型如下：...
AUTO OPTIMIZE语句
如果您需要优化单个数据库，但不希望优化数据库中的某些表，可以将这些表的该参数设置为false。不涉及 auto-optimize.rewrite.target-file-size-bytes 将文件重写至多大size的文件。单位是byte。默认值为536870912，即512 MB。
通过无锁变更工单实现无锁结构变更
为解决变更数据库表结构时的锁表问题，数据管理DMS 推出了无锁结构变更功能，该功能可以较好地规避因锁表以致于阻塞业务和数据库原生OnlineDDL带来的主备延迟问题。本文介绍通过提交无锁变更工单实现数据库无锁结构变更的方法。前提条件 ...
无锁结构变更
背景信息 为解决变更数据库表结构时的锁表问题，ODC V4.2.0 版本提供了无锁结构变更功能，该功能可以较好地规避因锁表以致于阻塞业务。本文档旨在介绍如何通过提交无锁变更工单实现数据库无锁结构变更。ODC 支持的在线结构变更 分类 操作 ...
实例间的数据库复制
若选择了某个数据库，则数据库内的表结构和表数据均会复制过去。是否复制用户和权限 是否将源数据库的所属用户以及权限复制到目标实例的数据库中。同步复制数据库的用户和权限：将源实例中该库对应的用户和权限复制到目标实例。存在以下两...
从MySQL导入数据
当您需要将云数据库RDS MySQL或云原生数据库PolarDB MySQL中的数据迁移至 云数据库ClickHouse 中进行实时分析时，本文档为您提供了以RDS MySQL为参考的示例，以帮助您轻松完成数据迁移任务。前提条件 已创建目标 云数据库ClickHouse 集群，...
ACL权限体系
以下列出AnalyticDB for MySQL 2.0的权限对象和各对象权限：Database（库），即 db_name.*或*（默认数据库），指定数据库或数据库上所有表/表组。TableGroup（表组），即 db_name.table_group_name 或 table_group_name，特定表组。Table...
Spark SQL
登录 DLA控制台，单击左侧导航栏的 SQL执行，您可以看到所有数据湖中的数据库和表结构，对表进行在线分析查询，以及管理子用户对库表的权限，如下图所示。纯SQL作业 DLA Spark支持直接在控制台写Spark SQL。无需用户打包jar包或者写python...
从MaxCompute外表导入（20.3及以上）
本文介绍如何将数据通过阿里云MaxCompute外表方式导入至 云数据库ClickHouse。注意事项 云数据库ClickHouse 社区兼容版集群的内核版本为20.3及以上。MaxCompute服务为付费服务。计费详情，请参见 MaxCompute计费方式。为了确保 云数据库...
恢复库表
RDS MySQL支持常规和极速级别的库表恢复功能，您可以将指定的库、表按备份集或时间点恢复至原实例或新实例...手动创建逻辑备份，然后 恢复逻辑备份到自建数据库。通过mysqldump进行备份和恢复。（可选）连接RDS MySQL实例，查看恢复到原实例或...
通过Kafka导入数据
默认是同步所有数据库和表 database.include.list=test table.include.list=test.test_table database.history.kafka.bootstrap.servers=localhost:9092#用于存储数据库表结构变化的 Kafka topic database.history.kafka.topic=dbhistory ...
PolarDB-X 1.0在DMS控制台上无法显示修改后的表结构
更多信息 为了兼容某些客户端从系统表（如COLUMNS或TABLES）中获取表结构的功能，PolarDB-X 1.0 在您的0分库RDS里建立了一个影子库，影子库名与 PolarDB-X 1.0 逻辑库名一致，存储了逻辑库里所有的表结构等信息。适用于 云原生分布式数据库...
跨库操作（dblink、postgres_fdw）
创建数据库 postgres=>\c<数据库名>/切换数据库 示例 postgres=>create database db1;CREATE DATABASE postgres=>\c db1 新建postgres_fdw插件。db1=>create extension postgres_fdw;新建用于连接远端目标数据库的服务器对象。db1=>CREATE ...
资源角色
可查询实例下所有数据库中的数据（不包含敏感字段），提交各类数据方案与库表结构的工单。对应于审批节点中 动态计算 的DBA。实例Owner 每个实例可以设置3个实例Owner。云数据库资源默认主账号为实例Owner。非云数据库默认当前录入的云账号...
如何清理孤立文档
数据库列表 var databasesToProcess=["database1","database2","database3"];shardNames.forEach(function(shardName){/遍历指定的数据库列表 databasesToProcess.forEach(function(dbName){ var dbInstance=db.getSiblingDB(dbName);获取...
基础用户权限
云数据库 SelectDB 版 的权限管理系统借鉴了MySQL的权限管理机制，实现了表级别细粒度的权限控制，并支持基于角色的权限访问控制和白名单机制。本文介绍 云数据库 SelectDB 版 包含的权限管理系统的背景和具备的权限管理能力，及一些使用时...
表一致性修复
可选：选择表结构的 版本号，默认为最新的表结构。关于表结构版本号，请参见 管理表结构版本 说明 基准库只能选择物理库。您需要具有基准库的查询权限。更多信息，请参见 管理访问控制权限。目标库 搜索并选择结构同步目标库。可选：选择表...
清空云虚拟主机数据库中表的数据
在左侧导航栏的 表 页签下，单击任一数据库的表，选择 批量操作表>更多批量操作.在 批量操作表 页面，清空数据库中一个或多个表的数据。如果您想单独清空一个表的数据，单击对应 单行操作 列下的 清空。如果您想批量清空多个表的数据，...
数据管理DMS中重新加载库表结构的元数据说明
概述 本文主要介绍数据管理DMS中，为什么需要重新加载库表结构的元数据。详细信息 通过数据管理DMS登录某个数据库实例时，DMS会加载该实例当前的数据库、表等元数据的结构信息。例如，数据库的名称列表、表的名称列表、当前表的结构字段、...
新增数据表
数据表是项目中的原始数据，可通过数据校验和数据授权...物理数据库名称 目标节点中存放 MySQL 数据表的 Database 数据库的名称。物理数据表名称 MySQL 数据表在 MySQL 数据库的真实名称。描述 选填，数据表的描述信息。配置完成后单击 确定。
GetAutoIncrementUsageStatistic-获取表自增ID使用数据
传入此参数时，查询指定数据库中表自增 ID 使用情况，不传入时查询实例上所有数据库的表自增 ID 使用情况。说明 数据格式为 JSONArray，例如['db1','db2']，数据库名间用英文逗号（,）分隔。['db1','db2']RatioFilter double 是 自增 ID ...
从RDS同步到云原生数据仓库 AnalyticDB MySQL 版
如果目标数据库中有同名的表，则在预检查阶段提示错误，数据同步作业不会被启动。说明 如果目标库中同名的表不方便删除或重命名，您可以更改该表在目标库中的名称，详情请参见 设置同步对象在目标实例中的名称。忽略报错并继续执行：跳过...
数据表管理
本文介绍了在 PolarDB-X 1.0 控制台上对数据表进行调整拆分键、关闭全表扫描和查看表结构的方法。前提条件 您需要先 连接到数据库 并 使用SQL语句创建表 后，才能在控制台上管理数据表。功能介绍 调整拆分键 拆分键即分库或分表的数据表字...
使用DTS迁移实例
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标库的表存储空间会比源库的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
通过DMS导出数据库文件
背景信息 通过数据管理DMS将云虚拟主机数据库中的文件导出后，该文件可以作为备份文件，用于恢复云虚拟主机数据库或导入新的数据库中创建相同格式的表结构等。操作步骤 登录Linux操作系统云虚拟主机MySQL数据库。具体操作，请参见 通过数据...
从RDS同步到云原生数据仓库AnalyticDB MySQL
如果目标数据库中有同名的表，则在预检查阶段提示错误，数据同步作业不会被启动。说明 如果目标库中同名的表不方便删除或重命名，您可以更改该表在目标库中的名称，详情请参见 设置同步对象在目标实例中的名称。忽略报错并继续执行：跳过...
功能概述
目标数据库：源数据库的克隆数据库，和源数据库拥有同样的表结构和数据，将源数据库捕获的流量回放的数据库。功能介绍 传统的压测方案大部分基于现有的压测工具（如sysbench、TPCC等），给定场景，改变数据写入和读取速度，观测压力变化对...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
增量同步 增量同步任务开始后，数据传输会同步源端数据库发生变化的数据（新增、修改或删除）至目标端数据库对应的表中。增量同步 支持的同步 DML 包括 Insert、Delete 和 Update，您可以根据需求进行选择。详情请参见 DML 过滤。全量校验 ...
DESCRIBE
如果您想要新建结构相似的表或数据库，可以通过DESCRIBE语法获取原表或原数据库的结构。适用引擎 DESCRIBE语法适用于宽表引擎和时序引擎。语法 describe_statement:={ DESCRIBE|DESC }[{ DATABASE|TABLE }]identifier 差异说明 宽表引擎和...
多表归并任务中执行Online DDL操作导致目标库数据丢失
问题描述 在通过DTS进行多表归并任务时，若在源库进行Online DDL操作，对源库的表结构等进行了调整修改，则同步到目标库时，会出现数据丢失的情况。说明 多表归并任务指将不同源库的表进行归并，继而同步或迁移到目标库。例如：当用户配置...
结构设计
数据管理DMS提供的结构设计功能，可以实现对目标库、表进行符合研发规范的表结构设计。您可按需自定义不同业务线的研发流程，保障多套环境（例如开发环境、测试环境、生产环境）之间结构的一致性。本文以物理库为例，介绍进行结构设计的...
使用DTS将自建PostgreSQL迁移至RDS PostgreSQL
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标库的表存储空间会比源库的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
- 产品推荐
- 这些文档可能帮助您