分库分表
数据拆分 数据库访问代理支持库级拆分，表级拆分和分库分表拆分，通过数据库访问代理 DDL 语句指定，具体操作参见 DDL 语法。数据访问代理根据指定拆分键的值，采用特定的算法进行计算，然后根据计算结果将数据存储到对应的分库/分表中。...
分库分表问题
常见分库分表问题列表：分库分表是否支持多个拆分字段 分库分表是否支持跨库 JOIN 分库分表对拆分库表的数量是否有限制 分库分表是否支持多个拆分字段 数据访问代理分库分表功能支持多个拆分字段，但是如果配置了拆分字段，后续执行 SQL 均...
MySQL分库分表实践
本文为您介绍如何通过DataWorker数据集成和Flink两种方式将MySQL分库分表的数据写入至Hologres同一个表中，通过本实践您可以根据业务场景选择合适的方式将MySQL分库分表数据写入Hologres。背景信息 实际业务场景下数据同步通常不能通过一个...
扫描全部/部分分库分表
本文介绍了扫描全部/部分分库分表的HINT语法和示例。除了可以将SQL单独下发到一个或多个分库执行，PolarDB-X 还提供了扫描全部/部分分库与分表的 SCAN HINT。使用 SCAN HINT，您可以一次将SQL下发到每一个分库执行,比如查看某个分库上的...
扫描全部/部分分库分表
本文介绍了扫描全部/部分分库分表的HINT语法和示例。本文适用于 PolarDB-X 1.0 5.3及以上版本，其他版本请参见 如何使用HINT（5.2及以下版本适用）。除了可以将SQL单独下发到一个或多个分库执行，PolarDB-X 1.0 还提供了扫描全部/部分分库...
分库分表（Alias功能）
本文介绍分库分表功能的使用场景和使用方法。背景信息 表变更业务逻辑中设置了访问某个表A，突然有一天需要修改为表B，此时只能修改配置进行线上变更。分库分表 业务大部分场景只访问最近一周的数据，可以每隔一周新建一张表来存储，这样...
分库分表（Alias功能）
分库分表 业务大部分场景只访问最近一周的数据，可以每隔一周新建一张表来存储，这样可以确保高效的查询热数据。在这个场景中需要自己来维护表的创建和删除，带来一定的业务复杂性。本文介绍的Alias（别名）将会完美的解决上面两个问题。...
MySQL分库分表同步至MaxCompute
本文以MySQL分库分表实时写入MaxCompute场景为例，为您介绍如何通过数据集成同步分库分表数据至MaxCompute。前提条件 已完成MaxCompute和MySQL数据源配置。您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来...
MySQL分库分表同步至MaxCompute
本文以MySQL分库分表实时写入MaxCompute场景为例，为您介绍如何通过数据集成同步分库分表数据至MaxCompute。前提条件 已完成MaxCompute和MySQL数据源配置。您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来...
场景：配置分库分表离线同步任务
DataWorks支持通过向导模式或脚本模式配置离线同步任务，您可以将分库分表数据同步至目标单表。本文以同步MySQL分库分表数据为例进行说明。前提条件 已准备好要同步的多个数据源，详情请参见 支持的数据源与读写插件。背景信息 分库分表...
RDS/PolarRDB 数据源配置分库分表
一般用户的分库分表分两种情况：单库多表：database1 table1、table2、table3、table4.多库多表：database1 database2 database3.table1、table2、table3、table4.table1、table2、table3、table4.table1、table2、table3、table4.这两种...
RDS/PolarDB 数据源配置分库分表
一般用户的分库分表分两种情况：单库多表：database1 table1、table2、table3、table4.多库多表：database1 database2 database3.table1、table2、table3、table4.table1、table2、table3、table4.table1、table2、table3、table4.这两种...
MySQL分库分表同步至Hologres（方案2.0）
本文将以MySQL分库分表实时写入实时数仓Hologres场景为例，为您介绍分库分表写入Hologres数据集成最佳实践。前提条件 已完成Hologres和MySql数据源配置。您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来...
能否更换PolarDB-X 1.0分库分表的拆分键？
若您的 PolarDB-X 1.0 实例...若您的 PolarDB-X 1.0 实例版本低于V5.4.7-16000638，不支持变更已创建完成的分库分表的拆分键。如果确实有需要变更表的拆分键，可以采用以下的临时办法：选择新的分库键并重新建表；然后将原表的数据进行导入。
MySQL分库分表同步至Hologres（方案1.0）
本文以MySQL分库分表实时写入Hologres场景为例，为您介绍如何通过数据集成同步分库分表数据至Hologres。前提条件 已完成Hologres和MySql数据源配置。您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来控制...
PolarDB-X 1.0的分库分表是什么意思？
关于 PolarDB-X 1.0 的分库分表的相关说明，请参见 拆分函数概述。
以及每个RDS分库里的分表数是否有限制？
单个RDS实例的默认分库数目是8个，不可更改。每个分库里的分表数目理论上是没有限制的，受限于 PolarDB-X 1.0 服务器本身的硬件资源。分表数目的选择需要依据对业务数据量的评估，详情请参见 如何选择分片数。
节点/数据库/表/分区/二级分区
这就是通常说的分库分表（Sharding）技术。通过Sharding技术，可以将用户数据打散到多个节点上，这样可以利用分布式的特性来进行并行计算，极大地提升性能。表 在HybridDB for MySQL中，表是一个逻辑概念。用户创建的表会根据分区key拆分到...
SQL 路由
在分库分表模式下，数据访问代理会根据拆分键（即拆分字段）以及 SQL 语义把 SQL 语句分发到底层中各个存储数据的分表进行执行。执行结束后，数据访问代理会将从各个分表获取的数据合并，然后返回给用户。本文介绍在分库分表场景中数据访问...
查看分库信息
您可以通过数据访问代理控制台查看数据库的分库分表信息以及后端各个物理分库名与所在的物理数据源（RDS 或 OceanBase）。操作步骤如下：进入数据访问代理控制台，单击左侧导航栏上的 数据库 后，可在右侧的数据库列表页面查看数据库相关...
数据同步模版
分库分表合并 当同一份业务数据分散在不同的数据库或者业务表时，我们往往需要用到分库分表合并的能力，将表结构相似的分库分表的数据同步到一张目标表中。Flink CDC可以自动同步源中所有分库分表的全量和增量数据（包括新增的符合正则表达...
如何使用全局二级索引
PolarDB-X 支持全局二级索引GSI（Global Secondary Index），本文将在分库分表语法下介绍如何创建、使用全局二级索引功能。使用限制 在AUTO模式的分区表中，该文档依然适用。仅创建语法需要参考 CREATE TABLE（AUTO模式）。注意事项 创建...
逻辑库
使用场景 如下为典型的逻辑库场景：单库-分表 分库-分表 分库-不分表 注意事项 SQL Console数据查询、结构设计、数据导出、数据变更等功能支持选择物理库或者逻辑库操作。选择逻辑库，则可便捷的进行分表/逻辑表操作，即将分表/逻辑表当做...
注意事项
分库分表规则 数据访问代理可以根据任意字段、多个字段进行分库分表，且同一个分表可以配置多个规则。如果配置了分表规则后，所有 SQL 请求都需要带上分库分表字段。如果数据库分片集群是分库分表模式，则所有数据库分表都需要配置分库分表...
UNI_HASH
使用示例 假设需要对id列按UNI_HASH函数进行分库分表，每库包含4张表，则您可以使用如下DDL语句进行建表：create table test_hash_tb(id int,name varchar(30)DEFAULT NULL,create_time datetime DEFAULT NULL,primary key(id))ENGINE=...
UNI_HASH
使用示例 假设需要对ID列按UNI_HASH函数进行分库分表，每库包含4张表，则您可以使用如下DDL语句进行建表：create table test_hash_tb(id int,name varchar(30)DEFAULT NULL,create_time datetime DEFAULT NULL,primary key(id))ENGINE=...
YYYYWEEK
当周数经过一个循环周期后（如2012年第1周经过一个2年的循环周期后是2014年第1周），相同周数有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。使用场景 YYYYWEEK函数适用于需要按年份与一年的周数进行分库的场景。...
缺少部分库表信息的原因
如果RDS MySQL数据库，在使用DAS空间相关功能的时候，发现某些库或者表没有显示出来，可能是因为您授予给DAS的数据库账号没有对应库表的Select权限。查看方式 直接通过命令确认：例如账号名称是das_test@'%'，show grants for das_test@'%'...
YYYYWEEK
当周数经过一个循环周期后（如2012年第1周经过一个2年的循环周期后是2014年第1周），相同周数有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本。关于实例...
Sharding 功能介绍
分库分表规则 Hash 取模：将数值对分库/分表数量进行取模，得到的值作为分库位/分表位。如分表规则为 Hash 取模，分表总数为 100，值为 230，则分表位计算结果为：230%100=30。字段类型为数字。字符串截断（MySQL 风格）：将值通过 MySQL ...
YYYYDD
当日期经过一个循环周期后（如2012-03-01经过一个2年的循环周期后是2014-03-01），同一个日期有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本，关于实例...
YYYYMM
当月份经过一个循环周期后（如2012-03经过一个2年的循环周期后是2014-03），相同月份有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。使用场景 适合于需要按年份与月份进行分库的场景，建议结合该函数与 ...
YYYYDD
当日期经过一个循环周期后（如2012-03-01经过一个2年的循环周期后是2014-03-01），同一个日期有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。使用场景 YYYYDD函数适用于需要按年份与一年的天数进行分库的场景。...
YYYYMM
当月份经过一个循环周期后（如2012-03经过一个2年的循环周期后是2014-03），相同月份有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本，关于实例版本请参见 ...
逻辑表
分库-分表，最常见的使用场景。说明 按序逐个物理库内的物理表数字递增均分。每个分库相同表名，如每个库都是1到12的12张分表。分库-不分表，即每个分库下有相同的一个物理表名。定义 当业务达到一定规模后，需要通过分库分表来进行负载...
拆分函数概述
拆分函数对分库、分表的支持情况 拆分函数 说明 是否支持用于分库 是否支持用于分表 HASH 简单取模 是 是 STR_HASH 截取字符串子串 是 是 UNI_HASH 简单取模 是 是 RIGHT_SHIFT 数值向右移 是 是 RANGE_HASH 双拆分列哈希 是 是 MM 按月份...
- 产品推荐
- 这些文档可能帮助您