Dataphin使用oneservice api调用SDK方式调用 报 DPN-...
产品名称 Dataphin 产品模块 API 概述 描述API注册调用报错DPN-OLTP-ENGINE-013|Columns Auth Check Failed:{0}|如何解决。问题描述 用户注册了API，并且使用oneservice api调用SDK方式调用，刚开始正常调用，然后修改了API，重新调用，报...
性能测试方法（OLTP）
测试用 PolarDB MySQL版 集群如下：只读、只写以及读写性能测试使用的是两节点集群（一主一只读），多个只读节点性能将依次使用一主一只读到一主八只读的集群进行测试。使用的连接串为集群地址，如何查看 PolarDB MySQL版 集群地址请参见 ...
性能测试方法（OLTP）
本文介绍了用SysBench工具测试PolarDB for PostgreSQL 14集群的OLTP负载性能的方法，您可以按照本文介绍自行测试对比，快速了解数据库系统的性能。测试工具 SysBench是一个跨平台且支持多线程的模块化基准测试工具，用于评估系统在运行高...
CDC测试
Sysbench oltp_write_only 测试方法参见 Sysbench测试，本测试使用oltp_write_only进行测试，测试命令如下，可通过调整并发数，构造不同的压测流量。sysbench-config-file='sysb.conf'-db-ps-mode='disable'-skip-trx='off'-mysql-ignore-...
性能白皮书
测试环境 数据库信息 说明 测试中使用的 RDS MySQL 均已开启自动扩容功能。类别 地域 类型 版本 规格 CPU 内存 源库 华东1（杭州）高可用系列的 RDS MySQL（标准版）8.0 mysql.x4.xlarge.2c（独享规格）8 32GB 目标库 测试客户端 说明 需要...
使用DMS进行数据归档
使用OLTP数据库进行数据归档 较差 优秀 中等 使用对象存储OSS进行数据归档 优秀 较差 较差 使用传统OLAP引擎进行数据归档 较差 优秀 优秀 使用 AnalyticDB PostgreSQL版 Serverless模式进行数据归档 优秀 优秀 优秀 前提条件 已创建 ...
PolarDB处理TPC-H查询的挑战和机遇
如果您从事查询优化和执行的工作，即使是使用OLTP（在线交易）型的数据库系统，也会和TPC-H打上交道。TPC-H是用来评估在线分析处理的基准程序，主要模拟了一个供应商和采购商之间的交易行为，其中包含针对8张表的22条分析型查询。说明 该...
PolarDB HTAP实时数据分析技术解密
MySQL+专用AP数据库的搭积木方案 专用分析型数据库产品众多，一个可选方案为：使用两套系统来分别满足OLTP和OLAP型需求，在两套系统中间通过数据同步工具进行数据实时同步。用户甚至可以增加一层proxy，自动将TP型负载路由至MySQL数据库，...
Sysbench测试（标准版）
压测场景：使用Sysbench oltp_read_write场景压测。压测时长：每个场景300秒。实例参数设置：全部采用开箱参数，不手动设置任何参数。测试过程 准备数据：sysbench-mysql-host='xxxx'-histogram='on'-mysql-user='xxx'-percentile='95'-...
负载均衡
测试使用的三个节点的权重配置比例为1:2:3（RW节点为1），可以看到压测结果符合预期（使用Sysbench oltp_read_only测试集）。说明 pi-bp1d1mtcobuzv*和 pcbp14vvpolardbma23957*两个节点为内部节点，不参与路由，指标无需考虑。按需建联 ...
HTAP中的行列混存查询优化
HTAP负载对优化器的新诉求 MySQL是目前被广泛使用的OLTP数据库。在数据的存储、访问以及部分简单或固定pattern的查询下表现出色，为了达到这一点，MySQL的查询优化器做了大量与其执行模型相关的优化。例如，在查询优化阶段执行并消除子查询...
表分区
使用继承实现 虽然内建的声明式分区适合于大部分常见的用例，但还是有一些场景需要更加灵活的方法。分区可以使用表继承来实现，这能够带来一些声明式分区不支持的特性，例如：对声明式分区来说，分区必须具有和分区表正好相同的列集合，而...
测试与发布API
附录：错误码及解决方案 错误代码 错误问题 解决方案 DPN-OLTP-COMMON-000 成功。无。DPN-OLTP-COMMON-001 系统发生未知异常。请提交 工单，或联系Dataphin的支持人员协助处理。DPN-OLTP-COMMON-002 参数异常。请检查参数的正确性。DPN-...
与开源PostgreSQL性能对比
简介 相较于开源PostgreSQL 14，PolarDB for PostgreSQL 14在以下几方面进行了优化，提升了整体性能：采用了领先硬件技术，包括使用3DXpoint存储介质的Optane存储卡、NVMeSSD和RoCE RDMA网络等。基于新的硬件，实现了一整套在用户态运行的...
Sysbench使用指南
示例命令 您可以使用如下命令进行对应操作：准备数据：sysbench-test='/usr/local/share/sysbench/oltp.lua'-oltp-tables-count=1-report-interval=10-oltp-table-size=10000000-mysql-user=*-mysql-password=*-mysql-table-engine=innodb-...
与同类PostgreSQL云原生数据库性能对比
简介 相对于同类PostgreSQL云原生数据库，PolarDB PostgreSQL版 在以下几方面进行了优化，提升了整体性能：采用了领先硬件技术，包括使用3DXpoint存储介质的Optane存储卡、NVMeSSD和RoCE RDMA网络等。基于新的硬件，实现了一整套在用户态...
测试步骤
使用sysbench工具加载测试数据。sysbench./tests/include/oltp_legacy/oltp.lua \-db-driver=pgsql \-pgsql-db=sbtest \-pgsql-user=<username>\-pgsql-password=<password>\-pgsql-port=5432 \-pgsql-host=<host>\-oltp-tables-count=64 \...
性能测试指导
本文介绍RDS MySQL实例性能测试的方法。前提条件 快速创建RDS MySQL实例。创建ECS实例。背景信息 实例性能测试的指标包括：每秒执行事务数TPS...16.71 ms 说明 SysBench工具有很多标准压测模型，您可以根据自己的业务场景选择合适的模型使用。
分流方案概述
如果您的业务中既包含OLTP类业务又包含OLAP类业务，则为了实现业务的最大性能，您可以基于列存索引特性，通过数据库代理的集群地址功能，实现OLAP查询引流到列存节点、OLTP查询引流到行存节点。背景信息 PolarDB MySQL版 支持两种只读节点...
免费体验RDS MySQL Serverless极致弹性
压测细节如下：测试模式：oltp_read_write、oltp_read_only、oltp_write_only、oltp_delete、oltp_update_index、oltp_update_non_index、oltp_insert。测试模式 模式说明 oltp_read_write 测试实例的读写性能 oltp_read_only 测试实例的...
免费体验PolarDB PostgreSQL Serverless极致弹性
压测细节如下：测试模式：oltp_read_write、oltp_read_only、oltp_write_only、oltp_delete、oltp_update_index、oltp_update_non_index。测试模式 模式说明 oltp_read_write 测试集群主节点的读写性能 oltp_read_only 测试集群主节点的...
免费体验PolarDB MySQL Serverless极致弹性
压测细节如下：测试模式：oltp_read_write、oltp_read_only、oltp_write_only、oltp_delete、oltp_update_index、oltp_update_non_index、oltp_insert。测试模式 模式说明 oltp_read_write 测试集群主节点的读写性能 oltp_read_only 测试...
X-Engine性价比优势
在大多数的OLTP事务型负载中，更新（oltp_update_index、oltp_write_only）和点查（oltp_point_select）的执行频率较高，X-Engine在这两项上的性能与InnoDB基本持平。由于X-Engine的分层存储特性，X-Engine在执行范围扫描时或检查一条记录...
如何选择PSL4和PSL5
PolarDB MySQL版 的存储...具体差异如下：oltp_insert、oltp_point_select、oltp_read_only、oltp_read_write负载模式下，PSL4性能略低于PSL5；oltp_update_index、oltp_update_non_index、oltp_write_only负载模式下，PSL4性能略高于PSL5。
使用说明
集群规格为4核8 GB时的性能对比如下：db-ps-mode=disable oltp_read_only db-ps-mode=auto oltp_read_write 集群规格为8核32 GB时的性能对比如下：db-ps-mode=disable oltp_read_only db-ps-mode=auto oltp_read_write 结论 由以上的测试...
一站式HTAP服务
背景信息 PolarDB PostgreSQL版 是擅长事务处理的OLTP数据库，将每一行数据以连续的形式保存在存储介质上，使用迭代器模型的执行器对数据进行增删改查。这种存储形式和执行模型能够很高效地完成高并发的事务处理负载，但无法高效应对大规模...
测试方法
操作步骤 使用SysBench测试RDS实例的读写混合性能。准备数据。sysbench-db-driver=mysql-mysql-host=XXX-mysql-port=XXX-mysql-user=XXX-mysql-password=XXX-mysql-db=sbtest-table_size=25000-tables=250-events=0-time=600 oltp_read_...
配置行列手动分流
如果您的业务中，OLAP类型与OLTP类型的业务基于不同的应用程序访问数据库，则可分别为这些应用程序配置不同的集群地址，然后将行存节点和列存节点分别配置到不同集群地址（Endpoint）的服务节点中，从而实现行存和列存分流。手动分流方案...
事务引擎介绍
高性能事务引擎（TokuDB）是HybridDB for MySQL提供的一种侧重于OLTP的实例规格，这种规格基于自主研发的高性能行式存储引擎，能够对同一份数据进行OLTP和OLAP处理，实现数据的即席分析（Ad Hoc）。HybridDB for MySQL事务引擎高度兼容...
使用非易失性存储提升读写性能
在ACK环境下，声明非易失性存储作为块存储或文件系统方式访问，无任何应用侵入和修改，降低非易失性存储卷的使用复杂度，读写性能相比SSD提升2~10倍。本文主要介绍ACK中非易失性存储卷在低延迟高速临时读写及数据密集型业务场景下的使用。...
透明数据加密TDE测试报告
说明 本测试中，使用sysbench加载128个表，其中每个表包含十万行记录，以下脚本示例中采用oltp_read_write模型。示例代码中线程数以16为例，执行中请替换为实际线程数（1、8、16、32、64、128、256）。sysbench-db-driver=mysql-mysql-host...
SQL回放
当源端OLTP库的数据迁移到目标端OLAP库后，您可以使用 数据管理DMS 的SQL回放功能，查看源端SQL在目标端的兼容性及SQL性能对比的结果，帮助您提升OLAP库的测试效率。背景信息 OLTP是传统关系型数据库的主要应用，主要用于基本和日常的事务...
非阻塞DDL
使用SysBench的oltp_read_write模拟业务负载，通过下图可以看出开启Nonblock DDL并使用传统的加列方式（INSTANT、INPLACE、COPY）比使用gh-ost工具耗时更少。测试结论 Nonblock DDL功能在DDL执行期间能更好的规避新事务阻塞、TPS跌零等问题...
Query Cache
OLTP 以下内容将使用带索引的点查进行评估，测试结果如下：场景 不使用Query Cache 使用Query Cache 0%缓存命中率 包含1条点查句 1718 TPS 测试过程中无Cache替换：1399 TPS 测试过程中有Cache替换：915 TPS 50%缓存命中率 包含2条点查句 ...
配置行列自动分流
如果您的业务中，OLAP类型的查询与OLTP类型的查询是通过同一个应用程序访问数据库，此时如果要实现分流，您需要设置集群地址的读写模式，并开启自动分流功能。自动分流功能开启后，数据库代理基于业务流入的SQL语句的预估执行代价来实现...
基于EBS部署高性能的MySQL服务
该值和innodb_buffer_pool_size相关，当缓冲池大小很大时，使用多个缓冲池实例可以提高并发性能 innodb_read_io_threads 4 控制InnoDB引擎用于处理读取操作的后台线程数量。如果您的数据库有较高的读并发需求，增加这些线程的数量可能会...
PolarDB MySQL版5.7版本性能（集群版）
独享规格 主节点+单只读节点 各规格只读性能测试结果 各规格写入性能测试结果 各规格混合读写性能测试结果 主节点+多只读节点 只读性能测试结果 说明 上图显示的是使用集群连接地址测试的只读QPS结果。上述测试中未指定 range_selects 参数...
PolarDB MySQL版5.6版本性能（集群版）
独享规格 主节点+单只读节点 各规格只读性能测试结果 各规格写入性能测试结果 各规格混合读写性能测试结果 主节点+多只读节点 只读性能测试结果 说明 上图显示的是使用集群连接地址测试的只读QPS结果。上述测试中未指定 range_selects 参数...
配置数据库代理
开启列存节点接受OLTP请求的能力后，列存节点将同时接受OLAP和OLTP请求，数据库代理会根据活跃请求数，将OLTP类读请求路由至列存节点，这可能会导致列存节点的负载上升。说明 仅当 行存/列存自动引流 为开启状态时支持该配置。安全防护 ...
- 产品推荐
- 这些文档可能帮助您