列存索引（IMCI）发布说明
实现形态 为了实现OLAP和OLTP的计算资源隔离，当前仅支持在只读节点上实现列存索引，即OLAP查询请求只发给只读节点，而不会发给主节点。至于OLAP查询请求是发给只读行存节点，还是只读列存节点，可根据 行存/列存分流方案 进行配置。技术...
概述
实现形态 为了实现OLAP和OLTP的计算资源隔离，当前仅支持在只读节点上实现列存索引，即OLAP查询请求只发给只读节点，而不会发给主节点。至于OLAP查询请求是发给只读行存节点，还是只读列存节点，可根据 行存/列存分流方案 进行配置。费用...
配置数据库代理
开启列存节点接受OLTP请求的能力后，列存节点将同时接受OLAP和OLTP请求，数据库代理会根据活跃请求数，将OLTP类读请求路由至列存节点，这可能会导致列存节点的负载上升。说明 仅当 行存/列存自动引流 为开启状态时支持该配置。安全防护 ...
动态增加或删除列存索引的DDL语法
查看索引状态 在启用列存索引特性后，当前OLAP查询请求会发给只读列存节点，而不会发给主节点，从而保证OLAP和OLTP的计算资源隔离。基于这种隔离限制，将新建列存索引或者修改列存索引定义的Online DDL优化为 异步DDL，其逻辑是在主节点上...
一站式HTAP服务
使用说明 步骤一：设置WAL日志等级 在使用一站式HTAP功能前，请先设置 wal_level 参数为 logical，否则无法在OLTP和OLAP引擎之间同步数据。说明 您可通过PolarDB控制台 参数配置 页面进行参数设置，具体请参见 设置集群参数。警告 该参数...
倒排索引
当您需要快速检索 云数据库 SelectDB 版 中的大量文本数据时，本文档将指导您如何创建和使用倒排索引，以支持您的文本检索应用，并提高检索速度。背景信息 倒排索引，是信息检索领域常用的索引技术。通过将文本分割成一个个词然后构建索引...
事务引擎介绍
高性能事务引擎（TokuDB）是HybridDB for MySQL提供的一种侧重于OLTP的实例规格，这种规格基于自主研发的高性能行式存储引擎，能够对同一份数据进行OLTP和OLAP处理，实现数据的即席分析（Ad Hoc）。HybridDB for MySQL事务引擎高度兼容...
功能特性
相对于中国很多分布式数据库采用的通过两种不同的计算引擎，甚至两套数据库系统去分别支持 OLTP 和 OLAP 的方式具有巨大优势。多租户 OceanBase 数据库采用了单集群多租户设计，天然支持云数据库架构，支持公有云、私有云、混合云等多种...
概述
简介 传统的OLTP和OLAP解决方案基于简单的读写分离或ETL模型，将在线库的数据以T+1的方式抽取到数据仓库中进行计算，这种方案存在存储成本高、实时性差、链路和维护成本高等缺陷。为应对数据爆炸式增长的挑战，PolarDB分布式版本基于对象...
产品概述
HTAP 随着移动互联网和IoT设备的普及，数据会产生爆炸式的增长趋势，传统的OLTP和OLAP的解决方案是基于简单的读写分离或者ETL模型，将在线库的数据以T+1的方式抽取到数据仓库中进行计算，这种方案存在存储成本高、实时性差、链路和维护成本...
Query Cache
性能评估 以下内容将针对OLTP和OLAP两种负载场景对Query Cache的效果进行评估。说明 本文的TPC-H和TPC-DS的实现基于TPC-H和TPC-DS的基准测试，并不能与已发布的TPC-H和TPC-DS基准测试结果相比较，本文中的测试并不符合TPC-H和TPC-DS基准...
技术架构
HTAP 随着移动互联网和Iot设备的普及，数据会产生爆炸式的增长趋势，传统的OLTP和OLAP的解决方案是基于简单的读写分离或者ETL模型，将在线库的数据T+1的方式抽取到数据仓库中进行计算，这种方案存在存储成本高、实时性差、链路和维护成本...
跨境SaaS:深圳市易仓科技有限公司
PolarDB HTAP能力让用户可以在一套 PolarDB 数据库上同时运行OLTP和OLAP型混合负载，在保证现有PolarDB优异的OLTP性能的同时，大幅提升 PolarDB 在大数据量上运行复杂查询的性能，复杂的查询性能相比行存有百倍以上性能提升。客户价值 价值...
PolarDB HTAP实时数据分析技术解密
MySQL+专用AP数据库的搭积木方案 专用分析型数据库产品众多，一个可选方案为：使用两套系统来分别满足OLTP和OLAP型需求，在两套系统中间通过数据同步工具进行数据实时同步。用户甚至可以增加一层proxy，自动将TP型负载路由至MySQL数据库，...
列存索引技术架构介绍
MySQL+专用AP数据库的搭积木方案 该方案由两套系统来分别满足OLTP和OLAP型需求，在两套系统中间通过数据同步工具进行数据的实时同步。用户甚至 可以增加一层Proxy，自动将TP型负载路由到MySQL上，将分析性负载路由到OLAP数据库上，对应用层...
实例选型和集群规划
如果用户有OLTP和OLAP的混合需求，可以采用分区表，例如按时间维度的需求分区，分区数目建议不超过200个，否则会影响查询的SQL优化性能。近期的数据明细查询较多的话，可以考虑使用行存。对于1 TB 原始数据，入库后采用行存储，大小一般...
列存索引（IMCI）性能
注意事项 IMCI功能按需开启，在同一集群内实现了OLTP和OLAP计算资源的隔离，开启IMCI功能后可以通过新增只读列存节点来服务业务中的OLAP查询请求。关于如何新增只读列存节点，请参见 添加只读列存节点。PolarDB IMCI性能测试时，需要额外...
PolarDB-X适用场景
本文介绍了 PolarDB-X 的适用场景。高负载低延时交易 场景描述 ...同时引入智能读写分离、只读副本做分析，保障OLTP和OLAP访问的隔离性的同时，提供统一访问入口，自动选择查询执行引擎。使用一份数据完成两种类型访问，免去ETL的成本和延时。
Multi-Master基础架构
背景信息 Hybrid Transaction Analytical Processing（HTAP）是著名信息技术咨询与分析公司Gartner在2014年提出的一个新的数据库系统定义，特指兼具OLTP（事务能力）和OLAP（分析能力）的数据库系统。在传统场景中，承担OLTP任务和OLAP任务...
配置行列手动分流
操作步骤 您需要为OLTP类业务和OLAP类业务分别配置不同的集群地址，配置集群地址的方式可参见 管理连接地址。在配置集群地址的过程中，有如下注意事项：针对OLTP类业务的集群地址：若在 只读 模式下，服务节点只需包含只读行存节点。若在 ...
Binlog in Redo
测试总结 oltp_update_non_index和oltp_insert只包含单语句事务，事务提交次数多，而oltp_write_only包含多语句事务（2个UPDATE、1个DELETE、1个INSERT），相比oltp_update_non_index和oltp_insert，事务提交次数较少，所以oltp_update_non...
弹性伸缩概述
使用方式 集群类型 相关文档 DataLake、Dataflow、OLAP和Custom集群 添加弹性伸缩规则 查看弹性伸缩活动 可视化弹性成本分析 查看集群资源概览 Hadoop集群 配置弹性伸缩（仅Hadoop集群类型）开启或关闭弹性伸缩（仅Hadoop集群类型）查看...
性能测试指导
prefix=usr-mandir=usr/share/man make#编译 make install 进行性能测试，包括OLTP读写混合场景压测、OLTP只读场景压测和OLTP只写场景压测。OLTP读写混合场景压测 参见如下命令进行测试，参数说明请参见 SysBench参数说明。准备数据 ...
使用说明
PolarDB MySQL版 提供的SQL Trace功能，用于跟踪SQL语句的执行信息，如：执行计划和执行统计信息（包括扫描行数、执行时间等）。可以帮助您快速地发现因执行计划...在oltp_read_only和oltp_read_write场景下SQL Trace对性能的影响均不超过3%。
创建Gateway集群
DataLake、OLAP和DataFlow集群的Gateway环境部署信息，请参见 使用EMR-CLI自定义部署Gateway环境。操作步骤 登录 EMR on ECS。在 EMR on ECS 页面，单击目标集群的集群名称。在 基础信息 页面，选择右上角的 全部操作>创建Gateway。在 创建...
Sysbench测试说明
本文将验证 PolarDB-X 1.0 在Sysbench OLTP和SELECT场景中的性能表现。测试设计 测试用实例规格如下：PolarDB-X 1.0（4种规格）：入门版8核32 GB 标准版16核64 GB 企业版32核128 GB 企业版64核256 GB ECS压力机（1台）：32核64 GB，操作...
基于EBS部署高性能的MySQL服务
MySQL是当今流行的开源关系型数据库管理系统之一，被广泛应用于各种互联网、企业和个人项目中。然而，随着数据量的增加以及应用复杂性的提升，数据库的性能可能会成为系统整体性能的瓶颈。单纯的优化SQL语句或者通过分库分表等方式并不能在...
Flink Table Store概述
Flink Table Store是一个流批统一的湖存储格式，支持高吞吐的...支持秒级数据新鲜度的批查询和OLAP查询。支持消费与产生增量数据，可作为传统与流式数仓的各级存储。关于Flink Table Store更多特性与用法，请参见 Apache Flink Table Store。
分流方案概述
OLTP与OLAP业务独立场景下行存和列存手动分流 若您的业务中，OLAP类型与OLTP类型的业务基于不同应用程序访问数据库，则可分别为这些应用程序配置不同的集群地址，然后将行存节点和列存节点分别配置到不同集群地址（Endpoint）的服务节点中...
计算资源组管理
使用资源组 以下介绍如何使用ETL资源组和OLAP资源组。使用ETL资源组 ETL资源组可以根据不同访问方式配置参数compute-group指定资源组名称的方式使用。以下分别介绍几个主要应用场景中，通过参数配置ETL资源组。访问方式 配置资源组 通过DMS...
Paimon概述
支持分钟级到秒级数据新鲜度的批查询和OLAP查询。支持消费与产生增量数据，可作为传统数仓与流式数仓的各级存储。支持预聚合数据，降低存储成本与下游计算压力。支持历史版本回溯。支持高效的数据过滤。支持表结构变更。更多信息，请参见 ...
Hadoop集群迁移至DataLake集群
EMR on ECS作为EMR主要资源形态之一已实现多项功能更新，特别是EMR新版控制台提供了DataLake、Dataflow、OLAP和Custom新集群业务场景，相比EMR旧版控制台的集群场景（例如，Hadoop、Data Science等），在集群管控效能和引擎性能方面实现了...
SSB性能测试说明
SSB简介 SSB是一种用于评估数据仓库和OLAP系统性能的基准测试。它模拟了一个典型的星型模式（Star Schema）数据模型，包含了Date（日期表）、Customer（客户表）、Supplier（供应商表）、Part（产品表）和Lineorder（订单事实表）这五个...
实例规格
以下验证 PolarDB-X 1.0 在Sysbench OLTP和SELECT场景中的性能表现。测试设计 PolarDB-X 1.0 计算层（4种规格）：入门版8核32 GB、标准版16核64 GB、企业版32核128 GB、企业版64核256 GB ECS压力机（1台）：32核64 GB、操作系统Alibaba ...
Gateway实例说明
创建Gateway集群 集群类型 文档链接 Hadoop 创建Gateway集群 DataLake、DataFlow和OLAP 使用EMR-CLI自定义部署Gateway环境 创建Gateway节点组 仅EMR-5.10.1及以上版本的DataLake和DataFlow集群，支持增加Gateway类型的节点组，详情请参见 ...
迁移ClickHouse数据到StarRocks
使用限制 EMR Serverless StarRocks实例和OLAP集群需要在同一VPC下。使用DataX同步数据 DataX介绍 DataX是阿里巴巴集团内被广泛使用的离线数据同步工具，实现了包括MySQL、Oracle、OceanBase、SqlServer、PostgreSQL、HDFS、Hive、ADS、...
使用须知
Phoenix定位为OLTP和操作型分析（Operational Analytics），大多用于在线业务，稳定性要求第一位。Phoenix的功能很强大，也很灵活。本文结合大部分用户的经验，给出一些使用建议，希望能帮助更多用户少走弯路。重要 云数据库HBase的SQL功能...
流式数据湖仓Paimon
支持分钟级到秒级数据新鲜度的批查询和OLAP查询。支持消费与产生增量数据，可作为传统的离线数仓和新型的流式数仓的各级存储。支持预聚合数据，降低存储成本与下游计算压力。支持回溯历史版本的数据。支持高效的数据过滤。支持表结构变更。...
列存索引行列融合基础组件介绍
背景信息 事务处理（OLTP）和分析处理（OLAP）混合工作负载在当前的业务系统中变得越来越常见。由于有实时、易运维等需求，一些业务系统会采用HTAP数据库来代替原有的OLTP-ETL-OLAP架构。HTAP数据库可以在一套数据库系统中同时较为高效地...
无感集成（Zero-ETL）
为了解决这些问题，阿里云瑶池数据库提供了无感集成（Zero-ETL）功能，可以快速构建业务系统（OLTP）和数据仓库（OLAP）之间的数据同步链路，将业务系统（OLTP）的数据自动进行提取、转换清洗和加载到数据仓库（OLAP），从而一站式完成数据...
- 产品推荐
- 这些文档可能帮助您