场景:配置分库分表离线同步任务

[/分库分表的Table列表1"tb1"]},{"datasource":"datasourceName2",/分库分表的数据源2"table":[/分库分表的Table列表2"tb2","tb3"]}],"useSpecialSecret":true,/各个数据源使用各自的密码"where":"","splitPk":"id","encoding":"UTF-8"},...

配置MySQL输入

您可以实现分库分表的场景,配置的库和表会在该任务中同时进行实时同步。重要 分库分表中的数据表的Schema请保持一致,以避免执行报错。输出字段 选择需要同步的字段,包括 管理字段 和 数据字段:管理字段:为方便进行数据管理、排序和去...

管理MySQL Catalog

例如,有一个分库分表的MySQL数据库,包括user01、user02和user99等多个表,分散在db01~db10等数据库中,且所有表的Schema都相互兼容,则可以通过如下正则表达式的库名表名来访问到所有user的分库分表。SELECT.FROM `db.*`.`user.*`/*+...

T+1多库合并建仓

为保证业务可以继续使用RDS数据库,业务端通常会采用分库分表技术,将一个RDS数据库中的单张表数据拆分到多个数据库的多张表中。上述方案可解决因数据量大而导致的用户体验问题,但在对分库分表数据进行大数据分析时,逻辑上的一个表被拆成...

查看分库信息

您可以通过数据访问代理控制台查看数据库分库分表信息以及后端各个物理分库名与所在的物理数据源(RDS 或 OceanBase)。操作步骤如下:进入数据访问代理控制台,单击左侧导航栏上的 数据库 后,可在右侧的数据库列表页面查看数据库相关...

PolarDB-X 1.0的分库分表是什么意思?

关于 PolarDB-X 1.0 的分库分表的相关说明,请参见 拆分函数概述。

扫描全部/部分分库分表

本文介绍了扫描全部/部分分库分表的HINT语法和示例。除了可以将SQL单独下发到一个或多个分库执行,PolarDB-X 还提供了扫描全部/部分分库与分表的 SCAN HINT。使用 SCAN HINT,您可以一次将SQL下发到每一个分库执行,比如查看某个分库上的...

扫描全部/部分分库分表

本文介绍了扫描全部/部分分库分表的HINT语法和示例。本文适用于 PolarDB-X 1.0 5.3及以上版本,其他版本请参见 如何使用HINT(5.2及以下版本适用)。除了可以将SQL单独下发到一个或多个分库执行,PolarDB-X 1.0 还提供了扫描全部/部分分库...

逻辑

逻辑库是由单个或多个物理库配置而成,可便捷地进行分库分表的操作。本文介绍逻辑库的定义、应用场景等信息。定义 当业务达到一定规模后,需要通过分库分表来进行负载均衡,从而达到在大量业务压力场景下具有平滑支撑的能力。当库的数量...

基本概念

数据库 database 表示数据访问代理的逻辑数据库。以这个作为访问的入口,通过分库分表、读写分离等规则可以请求到后端真实的物理数据库。数据表 data table 表示数据访问代理的逻辑表,应用访问数据访问代理时 SQL 中的表即数据表。一个...

拆分函数概述

拆分函数对分库分表的支持情况 拆分函数 说明 是否支持用于分库 是否支持用于分表 HASH 简单取模 是 是 STR_HASH 截取字符串子串 是 是 UNI_HASH 简单取模 是 是 RIGHT_SHIFT 数值向右移 是 是 RANGE_HASH 双拆分列哈希 是 是 MM 按月份...

数据表管理

功能介绍 调整拆分键 拆分键即分库分表的数据表字段,用于生成拆分规则。PolarDB-X 1.0 支持在控制台上对拆分键进行调整。在 PolarDB-X 1.0 中,一张逻辑表的拆分方式由拆分函数(包括分片数目与路由算法)与拆分键(包括拆分键的MySQL...

错误代码

如果检查分库分表没有问题,请确认是否已生效了数据库配置。ERROR 7002:Unable to find table rule 问题描述:无法找到表的规则,查看用户 SQL 中的表有没有在数据访问代理控制台上配置分表规则。排查方法:检查分库分表规则,是否有配置...

分布式序列问题

分库分表的分布式序列仅保证单个分片的序列 ID 唯一,如果需要确保分库分表的分布式序列全局唯一,可以在序列 ID 中拼接分库分表位,以此保证全局唯一。分布式序列使用注意事项 在运行过程中,不能调整 dbp_sequence 表的数据,如果进行了...

使用全局二级索引

索引分库分表子句:索引表的分库分表算法,与 CREATE TABLE 中分库分表子句的语法一致。示例#建表时定义 GSI CREATE TABLE t_order(`id` bigint(11)NOT NULL AUTO_INCREMENT,`order_id` varchar(20)DEFAULT NULL,`buyer_id` varchar(20)...

逻辑

为解决分库分表的场景下,查询、维护数据难的问题,DMS推出逻辑库、逻辑表的解决方案。您可以将多个(或单个)物理库配置成一个逻辑库、逻辑表,轻松查询与管理复杂、庞大的分库与分表。背景信息 分库分表场景下,业务数据按照路由算法分散...

能否更换PolarDB-X 1.0分库分表的拆分键?

若您的 PolarDB-X 1.0 实例...若您的 PolarDB-X 1.0 实例版本低于V5.4.7-16000638,不支持变更已创建完成的分库分表的拆分键。如果确实有需要变更表的拆分键,可以采用以下的临时办法:选择新的分库键并重新建表;然后将原表的数据进行导入。

注意事项

如果数据库分片集群是分库分表模式,则所有数据库分表都需要配置分库分表规则,如果数据库分片中只有单表,分库分表规则可以直接配置 0 即可。在如下配置中,single_table 会路由到 group_00 分片:使用限制 仅支持 DML 语句(INSERT、...

MM

描述 根据分库键时间值的月份数进行取余运算并得到分表下标。使用限制 拆分键的类型必须是DATE、DATETIME或TIMESTAMP中的一种。只能作为分表函数使用,不能作为分库函数使用。按MM进行分表,由于一年的月份只有12个月,所以各分库分表数...

DD

描述 根据分库键时间值日期的天数进行取余运算并得到分表下标。使用限制 拆分键的类型必须是DATE、DATETIME或TIMESTAMP中的一种。只能作为分表函数使用,不能作为分库函数使用。按DD进行分表,由于一个月中日期(DATE_OF_MONTH)的取值范围...

SELECT 语法

普通查询 分库分表查询条件要带上拆分键,否则要使用 HINT 指定分库分表或全表扫描。带拆分键查询仅支持=和 in,不支持范围查询。LIMIT 若有两个参数,第一个参数表示返回第一行的偏移量,第二个参数表示返回的行数。若仅有一个参数,则...

MM

只能作为分表函数而不是分库函数使用。按MM进行分表,由于一年的月份只有12个月,所以各分库分表数不能超过12。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本,关于实例版本请参见 版本说明。路由方式 根据分库键时间值的月份数...

DD

只能作为分表函数而不是分库函数使用。按DD进行分表,由于一个月中日期(DATE_OF_MONTH)的取值范围是1~31,所以各分库分表数不能超过31。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本,关于实例版本请参见 版本说明。路由方式...

MMDD

描述 根据分库键时间值在一年中所对应的日期进行取余运算并得到分表下标。使用限制 拆分键的类型必须是DATE、DATETIME或TIMESTAMP中的一种。只能作为分表函数使用,但不能作为分库函数。按MMDD进行分表,由于一年最多只有366天,所以各个...

WEEK

描述 根据分库键的时间值所对应的一周之中的日期进行取余运算并得到分表下标。使用限制 拆分键的类型必须是DATE、DATETIME或TIMESTAMP中的一种。只能作为分表函数使用,但不能作为分库函数。使用场景 WEEK适用于按周数的日期进行分表分表...

如何高效扫描数据

ID|GROUP_NAME|TABLE_NAME|+-+-+-+|0|DRDS_00_RDS|DRDS_USERS|1|DRDS_01_RDS|DRDS_USERS|+-+-+-+2 rows in set(0.06 sec)说明 非分库分表的表默认存储在第0个分库。推荐每次扫描前执行SHOW TOPOLOGY FROM TABLE_NAME获取最新的表拓扑结构。...

CreateDB

drds:该模式的数据库不支持自动分区,创建表时需使用专用的分库分表语法,指定分库分表键。返回数据 名称 类型 示例值 描述 Message String*成功为空,失败返回错误信息。RequestId String 9B2F3840-5C98-475C-B269-2D5C3A31797C 请求ID。...

WEEK

只能作为分表函数而不是分库函数使用。按WEEK进行分表,由于一周共有7天,所以各分库分表数不能超过7。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本,关于实例版本请参见 版本说明。路由方式 根据分库键时间值所对应的一周之中...

MMDD

只能作为分表函数而不是分库函数使用。按MMDD进行分表,由于一年最多只有366天,所以各个分库分表数目不能超过366。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本,关于实例版本请参见 版本说明。路由方式 根据分库键时间值在一...

什么是数据库存储DBFS

主备高可用:基于共享存储实现数据库主备无数据丢失的秒级切换。多活高可用:可部署例如Oracle RAC、SAP HANA等数据库及应用集群。一写多读:可通过集成DBFS SDK实现数据库一写多读功能。快照 支持DBFS快照功能,实现数据的备份与恢复。...

C100售前支持相关问题

咨询类问题 如何通过数据库审计实现数据库的安全监控及合规?数据库审计C100实例通过对数据库全量行为的审计溯源、危险攻击的实时告警、风险语句的智能预警,为数据库资产做好安全监控保障。数据库全行为追溯:对RDS云数据库、ECS自建数据...

STR_HASH

A:两者虽然都是直接根据字符串取值做分库分表的哈希路由,但是两者的分库分表的路由算法实现不一样。前者支持用户建表时自行设定截取子串相关参数,且在根据字符串的哈希值计算分库分表路由时是基于UNI_HASH算法进行计算;而后者是只对...

通过Mongo Shell连接MongoDB单节点实例

背景信息 云数据库MongoDB单节点实例提供的默认数据库admin,用于管理默认数据库账号root的信息,建议使用admin之外的数据库实现业务需求(即不对admin库进行任何操作)。准备工作 下载并安装与云数据库MongoDB实例数据库版本相同的Mongo ...

STR_HASH

A:两者虽然都是直接根据字符串取值做分库分表的哈希路由,但是两者的分库分表的路由算法实现不一样。前者支持用户建表时自行设定截取子串相关参数,且在根据字符串的哈希值计算分库分表路由时是基于UNI_HASH算法进行计算;而后者是只对...

通过Mongo Shell连接MongoDB副本集实例

背景信息 云数据库MongoDB副本集实例提供的默认数据库admin,存储了实例的所有数据库账号和角色信息,建议使用admin之外的数据库实现业务需求(即不对admin库进行任何操作)。准备工作 下载并安装与云数据库MongoDB实例数据库版本相同的...

全局二级索引

说明 创建GSI时需要注意选择与主表不同的分库分表键,详情请参见 使用全局二级索引。Q:全局二级索引和局部索引有什么关系?A:全局二级索引和局部索引间的关系如下所示:全局二级索引:不同于局部索引,如果数据行和对应的索引行保存在...

恢复数据库

数据库备份DBS 提供数据恢复能力,通过创建恢复任务将已完成备份的数据恢复到云数据库、本地数据库或DBS沙箱中,可用于误操作后恢复以及分析历史数据等场景。前提条件 DBS备份计划的运行状态为 运行中。已完成数据库备份。相关操作,请参见...

UNI_HASH

使用示例 假设需要对id列按UNI_HASH函数进行分库分表,每库包含4张表,则您可以使用如下DDL语句进行建表:create table test_hash_tb(id int,name varchar(30)DEFAULT NULL,create_time datetime DEFAULT NULL,primary key(id))ENGINE=...

UNI_HASH

使用示例 假设需要对ID列按UNI_HASH函数进行分库分表,每库包含4张表,则您可以使用如下DDL语句进行建表:create table test_hash_tb(id int,name varchar(30)DEFAULT NULL,create_time datetime DEFAULT NULL,primary key(id))ENGINE=...

将DRDS模式数据库转换为AUTO模式数据库

本文介绍了如何将DRDS模式的数据库转换为AUTO模式数据库。背景信息 PolarDB-X 支持通过create database like/as语句,将DRDS模式数据库转换为AUTO模式数据库。AUTO模式数据库与DRDS模式数据库的介绍,请参见 AUTO模式数据库与DRDS模式数据...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 云数据库 RDS 云数据库 MongoDB 版 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用