PolarDB PostgreSQL版一致性级别
PolarDB架构 PolarDB是一个由多个节点构成的数据库集群，一个主节点，多个读节点。对外默认提供两个地址，一个是集群地址，一个是主地址，推荐使用集群地址，因为它具备读写分离功能可以把所有节点的资源整合到一起对外提供服务。...
PolarDB的集群连接地址的会话一致性级别设置为指定的...
应用场景 PolarDB一致性级别越高，集群性能越低，企业可根据业务场景设置合适的一致性。风险等级 默认风险等级：中风险。当您使用该规则时，可以按照实际需求变更风险等级。检测逻辑 设置PolarDB集群地址的会话一致性级别为参数指定的值，...
使用NimoFullCheck校验迁移数据的一致性
NimoFullCheck是阿里云自主研发的用于检验源端DynamoDB和目的端MongoDB数据一致性的工具。本文档介绍如何使用NimoFullCheck进行一致性校验。前提条件 您已通过NimoShake将DynamoDB迁移到阿里云数据库。详情请参见 使用NimoShake将Amazon ...
全局一致性（高性能模式）测试工具和方法
table-cnt=100/测试表数量-table-size=1000/测试表行数-concurrency=100/测试并发线程数-database=sct/测试数据库-sc-gap-us=0/update和select之间的休眠时间,0表示update后立刻发起查询-report-interval=5/打印日志间隔-detail-log=0/不...
一致性级别
对数据库来说这些请求属于不同会话，但是业务逻辑上这些请求有前后依赖关系，此时会话一致性便无法保证查询结果的一致性。因此 PolarDB 提供了全局一致性来解决该问题。每个读请求到达 PolarDB 数据库代理时，代理都会先去主节点确认当前...
全局一致性（高性能模式）常见问题
对于 PolarDB MySQL版 8.0版本，开启全局一致性（高性能模式）后，转发机制如下：若数据库代理版本为2.8.36及以上：通过集群地址路由至RO节点的查询，如果出现全局一致性等待超时，会由Proxy自动转发至RW节点进行处理。客户端不会收到报错...
列存节点的事务一致性说明
中针对复杂查询的处理方式如下：开启 行存和列存自动分流 时，数据库代理对复杂查询（SQL语句的预估执行代价大于阈值）的处理方式不同于普通查询，针对复杂查询，数据库代理会将请求只发送给只读列存节点，即使只读列存节点的一致性位点...
一致性级别
最终一致性 功能介绍 PolarDB 是读写分离的架构，传统的读写分离只提供最终一致性的保证，主从复制延迟会导致从不同节点查询到的结果不同，例如在一个会话内连续执行如下查询，最后的SELECT结果可能会不同（具体的访问结果由主从复制的延迟...
创建快照一致性组
应用场景 快照一致性组典型的应用场景如下：业务系统部署在跨ECS实例的集群文件系统中，且要求时序一致性以及崩溃一致性的数据库或企业级应用的场景。例如，基于ECS自建的MySQL集群，基于多个卷搭建LVM、Oracle、SAP HANA上云场景等。大型...
数据迁移与同步FAQ
通常会持续运行该任务，用于保持源库和目标库的数据一致性。说明 数据迁移与数据同步均是从源库复制数据至目标库，不会对源库的数据产生影响。DTS的数据迁移与数据同步工作原理是什么？详情请参见 产品架构及功能原理。DTS的数据迁移与数据...
DataCheckConfigure参数说明
dest：以目标库为基准，校验源库与目标库数据的一致性（不校验源库比目标库多的数据）。fullCheckMaxReadRps Integer 每秒读取数据的最大行数，取值为0~9007199254740991的整数。说明 取值为0时表示不做限制。fullCheckMaxReadBps Integer ...
配置数据校验
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
版本及存储引擎
您可以通过该功能运行默认时间为5分钟的查询（或将其调整为自定义持续时间），同时保持与实时事务性数据库一致的快照隔离，也可以在Secondary节点（从节点）上进行快照查询，从而在单个集群中运行不同的工作负载，并将其扩展到不同的分片上...
查看数据校验详情
本文介绍如何查看数据传输服务DTS（Data Transmission Service）数据...增量校验任务是以源库为基准，校验目标库与源库数据的一致性。仅当源库发生数据变更且增量数据未被写入目标库，或者写入的数据与源库不一致时，才会校验出不一致数据。
ALIYUN:DTS:MigrationJob2
ALIYUN:DTS:MigrationJob2类型用于购买一个数据库迁移实例，同时可以配置数据迁移任务（新版）。语法 {"Type":"ALIYUN:DTS:MigrationJob2","Properties":{"Status":String,"Reserve":Map,"DataSynchronization":Boolean,...
ALIYUN:DTS:SynchronizationJob2
dest：以目标库为基准，校验源库与目标库数据的一致性（不校验源库比目标库多的数据）。fullDataCheck Boolean 否 否 是否进行全量数据校验。取值：true：进行全量数据校验。false：不进行全量数据校验。incrementalCheckValidFailNotice ...
迁移
SELECT default_character_set_name FROM information_schema.SCHEMATA WHERE schema_name='.' 如果目标数据库为AUTO模式，需在目标实例中创建DRDS模式数据库作为目标中继数据库，且目标中继数据库的字符集与源数据库的字符集保持一致，并...
开启应用一致性备份功能
当您使用应用一致性备份进行恢复时，可避免数据库等应用启动时进行日志恢复，确保应用处于一致性的启动状态。前提条件 ECS实例的操作系统在以下范围中：Windows：Windows Server 2019、Windows Server 2016和Windows Server 2012。Linux：...
创建应用一致性快照
类型 说明 实现方式 应用一致性快照 应用一致性快照在快照创建时刻备份内存数据及正在进行中的数据库事务，保证应用系统数据和数据库事务的一致性。通过应用一致性快照，没有数据的损坏及丢失，避免数据库启动时日志回滚，确保应用处于一致...
创建数据库
参数 说明 限制并发量 指对应数据库并发请求执行的上限量，默认不限制，您也可以使用高权限账号登录数据库后，使用 ALTER DATABASE<数据库名>CONNECTION LIMIT<并发量>;命令修改。表空间 指数据库所属的表空间，默认为 pg_default，表空间...
旧版样例简介
数据库操作提交，则消息一定发送成功；数据库操作回滚，则消息一定不会被发送出去。本案例是 GTS 和 MQ 综合实践的入门案例。具体使用步骤，请参见 sample-txc-mq 样例。sample-mq-consumer：该工程主要为上述案例中的 MQ 消息提供者...
通过Go SDK创建应用一致性快照
类型 说明 实现方式 应用一致性快照 应用一致性快照在快照创建时刻备份内存数据及正在进行中的数据库事务，保证应用系统数据和数据库事务的一致性。通过应用一致性快照，没有数据的损坏及丢失，避免数据库启动时日志回滚，确保应用处于一致...
源为PolarDB-X的功能规范和约束说明
数据库不支持混合模式，即unit模式和copy模式混合的同步链路。说明 unit模式是多地用户分别在各自地域读写本地域的数据，且本地域的数据会和中心数据双向同步。copy模式是指此集群数据在中心数据库写入，完成后全量同步到各个单元。如果是...
源为PolarDB-X的功能规范和约束说明
数据库不支持混合模式，即unit模式和copy模式混合的同步链路。说明 unit模式是多地用户分别在各自地域读写本地域的数据，且本地域的数据会和中心数据双向同步。copy模式是指此集群数据在中心数据库写入，完成后全量同步到各个单元。如果是...
创建账号和数据库
参数 说明 限制并发量 指对应数据库并发请求执行的上限量，默认不限制，您也可以使用高权限账号登录数据库后，使用 ALTER DATABASE<数据库名>CONNECTION LIMIT<并发量>;命令修改。表空间 指数据库所属的表空间，默认为 pg_default，表空间...
PolarDB技术内幕
2000年以后，随着互联网应用的出现，很多场景下，并不需要传统关系型数据库提供的一致性以及关系型数据模型。由于快速膨胀和变化的业务场景，对 可扩展性（Scalability）以及 可靠性（Reliability）更加需要，而这又正是传统关系型数据库的...
创建账号
CREATE DATABASE 命令默认通过复制template1来创建数据库。通过该方式创建的数据库，Public Schema的Owner均为第一个高权限账号。第一个高权限账号的Comment开头会包含说明：template1 public schema owner。普通账号 可以通过控制台、API...
查看数据迁移项目的详情
全量迁移加上增量同步，可以确保目标端数据库与源端数据库的最终一致性。如果全量迁移过程中有失败的对象，会为您展示具体的失败原因。重要 如果您在选择 迁移类型 时未配置 结构迁移，则全量迁移时，数据传输会以源端和目标端匹配的字段...
PolarDB PostgreSQL版架构介绍
数据一致性 传统数据库的内存状态同步 传统share nothing的数据库，主节点和只读节点都有各自的内存和存储，只需要从主节点复制WAL日志到只读节点，并在只读节点上依次回放日志即可，这也是复制状态机的基本原理。基于Shared-Storage的内存...
PolarDB PostgreSQL版架构介绍
数据一致性 传统数据库的内存状态同步 传统share nothing的数据库，主节点和只读节点都有各自的内存和存储，只需要从主节点复制WAL日志到只读节点，并在只读节点上依次回放日志即可，这也是复制状态机的基本原理。基于Shared-Storage的内存...
强一致分布式事务
分布式事务的下游生态 读写分离的一致性 事务型的分布式数据库一般会采用读写分离的模式提升读的性能，因此分布式事务除了保障主库的一致性以外，还需要保证用户在使用读写分离模式下对于备库的一致性。PolarDB-X 产品支持主实例和只读实例...
使用文件系统一致性快照
当系统崩溃或其他故障发生时，仍可保持数据的一致性和完整性。本文介绍如何使用文件系统一致性快照。前提条件 已创建Kubernetes集群，且集群为v1.18及以上版本。具体操作，请参见 创建Kubernetes托管版集群。访问指定地域的 ECS控制台，...
DB2数据源
jdbcUrl":"jdbc:db2:/ip:port/database",/DB2数据库的JDBC连接信息。column":["id"],"batchSize":1024,/一次性批量提交的记录数大小。table":"",/表名。username":"",/用户名。preSql":[]/执行数据同步任务之前执行的SQL语句。},"name...
配置缓存模式
强一致缓存模式（默认）提供强一致性的Tair缓存能力，支持社区Redis协议。基于PolarDB的 全局一致性（高性能模式）能力提供强一致性缓存，在PolarDB RW节点上的数据变更，Tair缓存节点提供数据的强一致变更。缓存性能：提供接近于Redis性能...
事务拆分
如果您的业务框架将所有请求都封装到非自动提交的事务中，导致主实例负载过大，您可以开通RDS PostgreSQL的数据库代理功能，该功能默认支持事务拆分，能够在保证业务中读写一致性的前提下，将事务内写操作发生之前的读请求转发到只读实例，...
什么是云数据库Cassandra
但是，对于互联网业务有如下特点：高可用、高并发、高存储、可调的一致性、灵活，MySQL并不是最佳选择，Cassandra为此而生。高可用：架构支持单节点故障时，业务无影响（注：要求节点及数据副本均有冗余，配置Quorum读写一致性）。扩展性强...
为SQL Server创建应用一致性快照最佳实践（Windows）
通过应用一致性快照回滚云盘，数据不会损坏和丢失，可以避免数据库启动时日志回滚，确保应用（例如SQL Server）处于一致性的启动状态。本文以SQL Server数据库为例，介绍如何创建Windows实例的应用一致性快照，并验证应用一致性快照的数据...
概述
Cache Aside模式下，持久化层和缓存层的一致性问题主要是“双写”，即数据既在数据库中保存一份，又在缓存中保存一份，通过应用侧来维护两份数据的一致性。这种情况下会遇到很多数据一致性的问题，比如数据库和缓存的操作先后顺序、缓存是...
概述
PolarTrans事务系统利用提交时间戳技术CTS和RDMA网络，在内核层面提供全局一致性（高性能模式）服务，保证发往集群任意副本的读请求都可以获得强一致性的结果。本文档介绍了全局一致性（高性能模式）服务的使用限制、技术原理、开启方式...
数据方案概览
一级功能 二级功能 功能描述 结构变更 结构设计 可以对目标库、表进行符合研发规范的表结构设计，保障多套环境（例如开发环境、测试环境、生产环境）之间结构的一致性。结构同步 支持对比不同数据库、指定表之间的表结构，产生差异化脚本并...
- 产品推荐
- 这些文档可能帮助您