关系数据库全量入湖
本文为您介绍如何在数据湖构建（Data Lake Formation，简称DLF）中使用关系数据库全量入湖任务将RDS或...一库多表入湖 DLF支持关系数据库一库多表的入湖，目前需要在表路径中配置前缀匹配，例如test_db/order_*将测试库中订单相关表批量同步。
基本概念
数据库实例：数据库实例是在云中运行的独立数据库环境。一个数据库实例可以包含多个由数据库用户创建的数据库，并且...索引：索引是数据库管理系统对数据库表中一个或多个列的值进行排序的数据结构，使用索引可快速访问数据库表中的特定信息。
概述
Federated引擎允许您访问远程 PolarDB MySQL版 集群或社区MySQL数据库中的数据，而无需使用复制或集群技术。本地Federated表中未存储任何数据，查询本地Federated表会通过远程方式提取远程表数据。当您使用 PolarDB MySQL版 或社区MySQL...
管理关系
一对一 一对一关系是指关系数据库中第一个表中的单个行只可以与第二个表中的一个行相关，且第二个表中的一个行也只可以与第一个表中的一个行相关。一对多 一对多关系是指关系中第一个表中的单个行可以与第二个表中的一个或多个行相关，但...
快速入门
Ganos FDW提供了对于多种空间数据类型的统一访问，会自动将几何空间数据类型映射为Geometry字段类型，从而允许与数据库内部表进行统一地访问与查询。操作步骤 创建时空引擎FDW插件。您可以通过以下两种方式创建扩展。直接创建Ganos_FDW扩展...
快速入门
Ganos FDW提供了对于多种空间数据类型的统一访问，会自动将几何空间数据类型映射为Geometry字段类型，从而允许与数据库内部表进行统一地访问与查询。操作步骤 创建时空引擎FDW插件。您可以通过以下两种方式创建扩展。直接创建Ganos_FDW扩展...
支持的数据源
本文介绍Lindorm与关系型数据库、NoSQL数据库、大数据生态之间的数据导入导出能力。其中部分能力由LTS（Lindorm自研的数据通道服务）支持，部分能力由DataWorks或DTS支持。数据导入 源集群 目标集群 全量导入 增量导入 关系数据库 MySQL ...
5.6/5.7/8.0版功能对比
SQL防火墙 ✔️ 动态脱敏 ✔️ 数据库管理 功能 集群版 管理数据库 ✔️ 数据库代理企业版 功能 集群版 管理连接地址 ✔️ 连接数据库集群 ✔️ 私有域名 ✔️ 读写分离 ✔️ 配置数据库代理 ✔️ 过载保护 ✔️ 变更集群配置 功能 集群版 ...
Hive数据迁移
MMA可以创建单库、多表、多分区三个级别的迁移任务。说明 单库，迁移单个Database。多表，迁移一个或多个Table。多分区，迁移1个或多个Partition。迁移多个表。单击页面左侧的 数据源，在数据源列表页面单击想要迁移的数据源名。在所选的...
创建维表
关系型数据库（RDS）目前仅支持MySQL数据存储类型，数据库中必须要有真实的表存在。示例：CREATE TABLE rds_dim_table(id int,len int,content VARCHAR,PRIMARY KEY(id),-用作维表时，必须有声明的主键。PERIOD FOR SYSTEM_TIME-定义维表的...
BUILD
SET ADB_CONFIG 既支持对单张表配置优先级，也支持对多张表配置优先级，且优先级一直生效，直至再次配置该表优先级时，才会改变。如果同时使用Hint和 SET ADB_CONFIG 为同一个表配置了不同的优先级，在当前提交的任务中，该表的BUILD调度...
约束
为了说明这些，让我们在上面的多对多关系例子中实现下面的策略：当某人希望移除一个仍然被一个订单引用（通过 order_items）的产品时，我们组织它。如果某人移除一个订单，订单项也同时被移除：CREATE TABLE products(product_no integer ...
将自建ClickHouse向企业版迁移
CREATE DATABASE db 使用源集群的 CREATE TABLE 语句，在目标数据库上创建表。CREATE TABLE db.table.在目标集群上创建表，使用来自源集群的 SELECT CREATE_TABLE_QUERY.的输出。允许源集群上的远程操作。为了从源集群到目的集群地读取数据...
创建多表join
主辅表数据关联关系 通过手动创建应用结构方式，为应用创建多个表时，多表之间数据关联关系描述如下：目前主辅表，数据关联仅支持 N:1 或 1:1 的关系，不支持 1:N（即多表数据关联关系中，多的一方只能是主表）。主辅表需通过应用表外键与...
管理数据库
数据库：数据库是以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合，可以简单理解为存放数据的仓库。字符集：字符集是数据库中字母、符号的集合，以及它们的编码规则。前提条件 已创建RDS ...
mysqldump
db-tables test_table-no-data 导出test_db1、test_db2数据库中所有表：mysqldump-h127.0.0.1-P9030-uroot-no-tablespaces-databases test_db1 test_db2 导出所有数据库和表：mysqldump-h127.0.0.1-P9030-uroot-no-tablespaces-all-...
容量中心
单击 详情 或者数据库名称，可进一步查看不同数据库的表数据信息分布详情。可查看每个表的 表名、行数、磁盘使用大小、数据大小、宏块使用率、分区数量 和 自增列使用率。查看集群容量信息。当选择所有租户时，不再显示数据库和数据表筛选...
开启多表归并
在使用数据传输服务DTS（Data Transmission Service）进行数据同步或迁移时，若目标库为 云原生数据仓库AnalyticDB MySQL版 3.0、云原生数据仓库AnalyticDB PostgreSQL版 或表格存储（Tablestore）时，DTS将提供多表合并功能。该功能支持将...
跨库操作（dblink、postgres_fdw）
创建数据库 postgres=>\c<数据库名>/切换数据库 示例 postgres=>create database db1;CREATE DATABASE postgres=>\c db1 新建postgres_fdw插件。db1=>create extension postgres_fdw;新建用于连接远端目标数据库的服务器对象。db1=>CREATE ...
数据同步模版
说明 在进行多库多表数据同步时，该模版会在目标Catalog中创建与源Catalog同名的数据库和表。如果您需要修改数据库或表名称，则建议通过编写SQL的方式进行修改，详情请参见 CREATE TABLE AS（CTAS）语句 和 CREATE DATABASE AS（CDAS）语句...
兼容性概览
以下列出了 AnalyticDB MySQL版 支持的客户端或ETL工具，以及这些客户端或工具与 AnalyticDB MySQL版 在数据库连通性、列举数据库、建表、查询表数据等方面的兼容性。客户端与 AnalyticDB MySQL版 兼容性 客户端 连接数据库 列举数据库 建...
空间碎片自动回收
删除或更新数据库数据时，会使数据在磁盘上的存储变得不连续，产生空间碎片，这导致磁盘空间浪费和数据库性能下降。DAS支持自动回收MySQL中达到阈值（如表空间大小、碎片率）的表的空间碎片。回收在实例可维护时间段执行，且会检查实例负载...
将MySQL数据迁移到Redis
场景介绍 在应用与数据库之间使用Redis作为缓存层，扩展传统关系型数据库的服务能力，从而优化业务的生态体系，是Redis的经典应用场景之一。将业务中的热数据保存到Redis，用户通过应用直接从Redis中快速获取常用数据，或者在交互式应用中...
清空云虚拟主机数据库中表的数据
背景信息 云虚拟主机支持MySQL数据库和SQL Server数据库，根据不同的数据库类型，请您选择如下对应操作：如果您云虚拟主机的数据库类型是MySQL，具体操作，请参见 清空MySQL数据库中表的数据。如果您云虚拟主机的数据库类型是SQL Server，...
GRANT
GRANT语法用于给授予指定权限，例如表的读写权限、数据库的所有权限等。适用引擎 GRANT语法适用于宽表引擎和时序引擎。无版本限制。语法 grant_permission_statement:=GRANT privilege_definition ON resource_definition TO user_...
结构同步
数据管理DMS 的结构同步功能支持对比不同数据库、指定表之间的表结构，产生差异化脚本并执行到目标数据库。适用于对比、同步多套数据库环境的表结构，例如生产库与测试库、不同的测试库、不同的生产库等。前提条件 支持的数据库类型如下：...
创建关系表
本文为您介绍迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户时，CREATE TABLE DDL 创建关系表的支持转换范围。总览 relational_table:[(relational_properties)][immutable_table_clauses][blockchain_table_clauses][DEFAULT ...
关系表列定义
本文为您介绍迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户时，CREATE TABLE DDL 关系表列定义的支持转换范围。总览 relational_properties:{ column_definition|virtual_column_definition|period_definition|{ out_of_line_...
MySQL整库同步Kafka
本文为您介绍如何将MySQL整库同步Kafka，从而降低多个任务对MySQL数据库造成的压力。背景信息 MySQL CDC数据表主要用于获取MySQL数据，并可以实时同步数据表中的修改，经常用在复杂的计算场景。例如，作为一张维表和其他数据表做Join操作。...
基础版Spark全密态计算引擎使用示例
数据准备 本文示例的RDS MySQL数据库名为 adb，并在该库中创建了一张名为 customer 的表，示例如下：CREATE DATABASE IF NOT EXIST adb;CREATE TABLE IF NOT EXISTS adb.customer(id int,name varchar(1023),address varchar(1023),age int...
空库初始化
数据管理DMS 的空库初始化功能支持将源数据库的表结构同步至空数据库中（数据库中不存在任何表），实现快速同步数据库表结构，适用部署多区域、多单元的数据库环境。前提条件 支持的数据库类型如下：MySQL：RDS MySQL、PolarDB MySQL版、...
通过LOCALITY指定存储位置（DRDS模式）
PolarDB-X 支持通过LOCALITY关键字来指定数据库或单表的存储位置，以实现数据隔离或数据的均匀分布。本文介绍了DRDS模式数据库中使用LOCALITY的方法。本语法仅适用于DRDS模式数据库。前提条件 实例版本需为5.4.10或以上。关于如何查看实例...
使用限制
database数量 一个实例最多创建16个数据库（包含default数据库）。table名称 由大写字母、小写字母、数字、下划线其中的一种或多种组成，最大长度为128个字符。table数量 一个数据库最多创建10000个数据表。tag列名称 可见字符，最大长度为...
SQL命令管理数据库
删除数据库 执行如下命令，删除数据库：DROP DATABASE[TestDb]需注意，若您在删除数据库前没有对该数据库进行过任何备份，系统会返回如下提示信息：DROP DATABASE[TestDb]-Kindly reminder:your database[TestDb]does not exist any backup...
IO加速
具体而言，实例创建的临时表等临时对象（不显式指定表空间）和在查询执行过程中产生的临时文件都将被存储到高速缓存介质中，从而提升数据库对这些临时数据的读写，在一定时间内可以执行处理更多的查询。说明 RDS PostgreSQL是通过表空间来...
通过Spark SQL读Lindorm数据
创建OSS外部数据库和表 CREATE DATABASE IF NOT exists external_oss_db location 'oss:/testBucketName/warehouse/db';CREATE TABLE IF NOT exists external_oss_db.lindorm_table_2(id string,name string)using parquet location 'oss:/...
HiveMetastore
在HiveMetastore中已创建数据库和表，并插入数据。参考命令样例如下：CREATE DATABASE testDb;CREATE EXTERNAL TABLE if not exists testDb.testTable(id int,name string);insert into testDb.testTable(id,name)values(1,"jack");操作...
如何实现不锁表转冷存
操作步骤 PolarDB PostgreSQL版 数据库提供的 pg_repack 插件可以实现在不持有大锁的情况下在线将数据转为冷存，这样可以大幅度降低数据迁移对在线业务的影响。pg_repack 以安装在 PolarDB PostgreSQL版 侧的插件作为服务端，并提供专用的...
如何实现不锁表转冷存
操作步骤 PolarDB PostgreSQL版（兼容Oracle）数据库提供的 pg_repack 插件可以实现在不持有大锁的情况下在线将数据转为冷存，这样可以大幅度降低数据迁移对在线业务的影响。pg_repack 以安装在 PolarDB PostgreSQL版（兼容Oracle）侧的...
概述
实例中某些库表的数据几乎没有更新、插入和修改操作，且读取频率非常低，如果您有降本需求，可以使用 PolarDB-X 企业版提供的冷数据归档功能，将这部分数据转存至低成本的OSS上存储，以降低数据存储成本。本章节介绍了冷数据归档方法、技术...
- 产品推荐
- 这些文档可能帮助您