为什么云原生数据仓库AnalyticDB版的OLAP性能比RDS好...
云原生数据仓库AnalyticDB版为OLAP场景进行了深度的优化，例如列式存储、分布式优化器，块级别的数据压缩，并行的数据导入和导出，弹性扩容，隐式并行的机器学习库MADlib（已经支持），R过程语言（即将推出）等。RDS是为OLTP设计的，不适合...
SSB性能测试说明
本文为您介绍如何使用Star Schema Benchmark（简称SSB）对OLAP查询场景进行性能测试。SSB简介 SSB是一种用于评估数据仓库和OLAP系统性能的基准测试。它模拟了一个典型的星型模式（Star Schema）数据模型，包含了Date（日期表）、Customer...
并行查询测试方法
本文档基于TPC-H基准，测试 PolarDB MySQL版 8.0版本 集群版 的OLAP负载性能，您可以按照本文介绍自行测试对比，以快速了解数据库系统的性能。注意事项 本文的TPC-H的实现基于TPC-H的基准测试，并不能与已发布的TPC-H基准测试结果相比较，...
TPC-H性能测试说明
本文为您介绍如何使用TPC-H（商业智能计算测试）对OLAP查询场景进行性能测试。TPC-H简介 以下文字描述引用自 TPC Benchmark H(TPC-H)：“TPC-H是一个决策支持基准，由一套面向业务的临时查询和并发数据修改组成。选择的查询和填充数据库的...
混合负载HTAP的实践和优化
背景信息 本文主要提供数据库上云后OLTP+OLAP一体化架构的最佳实践，即HTAP。主要面对的业务应用范围如下：混合型HTAP数据库需求，如Oracle数据库改造上云，云上数据库方案选型；OLTP系统查询慢，存在分析型场景和瓶颈的客户；读写分离需求...
分流方案概述
如果您的业务中既包含OLTP类业务又包含OLAP类业务，则为了实现业务的最大性能，您可以基于列存索引特性，通过数据库代理的集群地址功能，实现OLAP查询引流到列存节点、OLTP查询引流到行存节点。背景信息 PolarDB MySQL版 支持两种只读节点...
Catalog概述
本文为您介绍什么是Catalog（数据目录），以及如何使用Catalog查询内外部数据。基本概念 内部数据：保存在StarRocks中的数据。...SELECT*FROM hive_catalog.hive_db.hive_table h JOIN default_catalog.olap_db.olap_table o WHERE h.id=o.id;
Catalog概述
本文为您介绍什么是Catalog（数据目录），以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：保存在StarRocks中的...SELECT*FROM hive_catalog.hive_db.hive_table h JOIN default_catalog.olap_db.olap_table o WHERE h.id=o.id;
一站式HTAP服务
在重度OLAP的业务场景中，通常需要将数据从OLTP数据库中导出，然后将数据迁移并导入到专业的OLAP数据仓库，在数据仓库中进行大规模的分析型查询。专业的数据仓库通常会把每个列的数据以连续的形式保存在存储介质上，并提供向量化模型的执行...
概述
实现形态 为了实现OLAP和OLTP的计算资源隔离，当前仅支持在只读节点上实现列存索引，即OLAP查询请求只发给只读节点，而不会发给主节点。至于OLAP查询请求是发给只读行存节点，还是只读列存节点，可根据 行存/列存分流方案 进行配置。费用...
计算资源组管理
使用OLAP资源组 OLAP资源组可以通过Lindorm-cli或JDBC方式连接使用。以下介绍如何通过参数配置OLAP资源组。前提条件 Lindorm实例宽表版本>=2.6.5。说明 OLAP资源组目前仅支持查询，不支持写入数据。通过Lindorm-cli连接计算引擎 根据您的...
列存索引（IMCI）发布说明
实现形态 为了实现OLAP和OLTP的计算资源隔离，当前仅支持在只读节点上实现列存索引，即OLAP查询请求只发给只读节点，而不会发给主节点。至于OLAP查询请求是发给只读行存节点，还是只读列存节点，可根据 行存/列存分流方案 进行配置。技术...
配置行列手动分流
如果您的业务中，OLAP类型与OLTP类型的业务基于不同的应用程序访问数据库，则可分别为这些应用程序配置不同的集群地址，然后将行存节点和列存节点分别配置到不同集群地址（Endpoint）的服务节点中，从而实现行存和列存分流。手动分流方案...
应用场景
适用场景 OLAP多维分析 用户行为分析 用户画像、标签分析、圈人 高维业务指标报表 自助式报表平台 业务问题探查分析 跨主题业务分析 财务报表 系统监控分析 实时数仓 电商大促数据分析 教育行业的直播质量分析 物流行业的运单分析 金融行业...
SQL回放
当源端OLTP库的数据迁移到目标端OLAP库后，您可以使用 数据管理DMS 的SQL回放功能，查看源端SQL在目标端的兼容性及SQL性能对比的结果，帮助您提升OLAP库的测试效率。背景信息 OLTP是传统关系型数据库的主要应用，主要用于基本和日常的事务...
优化器
MagicSet下推 MagicSet下推是适用于OLAP的一个高效的优化器改写规则，其利用MagicSet提供的filtering能力，降低在大表上聚合的代价，并降低同聚合结果join的代价，从而达到减少聚合的负担及提高与聚合结果join的性能的效果。AnalyticDB ...
关于自定义分析
自定义分析在 mPaaS 自定义埋点的基础上，通过联机分析处理（OLAP）对客户端自定义事件进行多维即时自定义分析，以满足云上不同业务的特殊需求，同时能在前端根据定义的不同查询条件、查询场景生成保存不同的报表。多维即时自定义分析指...
标签分账
Hologres实例名称 业务部门 标签 Instance A 数据研发部门 department:Dev Instance B 业务部门一 department:OLAP Instance C 业务部门一 department:OLAP Instance D 业务部门二 department:Serving 步骤二：绑定标签 访问 Hologres实例...
使用PTS测试Hologres性能实践
OLAP查询场景：需要创建列存表，从数据源中同步数据，设计OLAP查询测试语句。Key/Value点查场景：需要创建行存表，从数据源中同步数据，设计Key/Value点查测试语句。数据更新场景：需要创建表，写入原始数据，并准备需要进行更新的数据。...
如何发起实时数仓Hologres性能压测
OLAP查询场景：需要创建列存表，从数据源中同步数据，设计OLAP查询测试语句。Key/Value点查场景：需要创建行存表，从数据源中同步数据，设计Key/Value点查测试语句。数据更新场景：需要创建表，写入原始数据，并准备需要进行更新的数据。...
如何发起实时数仓Hologres性能压测
OLAP查询场景：需要创建列存表，从数据源中同步数据，设计OLAP查询测试语句。Key/Value点查场景：需要创建行存表，从数据源中同步数据，设计Key/Value点查测试语句。数据更新场景：需要创建表，写入原始数据，并准备需要进行更新的数据。...
产品概述
StarRocks作为一款兼容MySQL协议的OLAP分析引擎，提供了极致的性能和丰富的OLAP场景模型，包括OLAP多维分析、数据湖分析、高并发查询以及实时数据分析。关于EMR Serverless的更多介绍，请参见 什么是EMR Serverless StarRocks。产品架构 ...
产品简介
StarRocks作为一款兼容MySQL协议的OLAP分析引擎，提供了极致的性能和丰富的OLAP场景模型，包括OLAP多维分析、数据湖分析、高并发查询以及实时数据分析。关于EMR Serverless的更多介绍，请参见 什么是EMR Serverless StarRocks。产品架构 ...
EMR Serverless StarRocks商业化发布
StarRocks作为一款兼容MySQL协议的OLAP分析引擎，提供了极致的性能和丰富的OLAP场景模型，包括OLAP多维分析、数据湖分析、高并发查询以及实时数据分析。更多信息，请参见 什么是EMR Serverless StarRocks。控制台入口：立即前往。免费试用...
配置行列自动分流
如果您的业务中，OLAP类型的查询与OLTP类型的查询是通过同一个应用程序访问数据库，此时如果要实现分流，您需要设置集群地址的读写模式，并开启自动分流功能。自动分流功能开启后，数据库代理基于业务流入的SQL语句的预估执行代价来实现...
互联网教育：尚学博志（上海）教育科技有限公司
为了满足校园大脑数据中心系统的数据分析需求，我们额外部署了专用的OLAP系统来与其主业务系统之间通过DTS/ETL的方式保持进行数据同步。业务的不断发展为这一套系统带来前所未有的挑战，突出表现在以下几点：MySQL主节点+只读节点的方式扩...
弹性伸缩概述
使用方式 集群类型 相关文档 DataLake、Dataflow、OLAP和Custom集群 添加弹性伸缩规则 查看弹性伸缩活动 可视化弹性成本分析 查看集群资源概览 Hadoop集群 配置弹性伸缩（仅Hadoop集群类型）开启或关闭弹性伸缩（仅Hadoop集群类型）查看...
事务引擎介绍
高性能事务引擎（TokuDB）是HybridDB for MySQL提供的一种侧重于OLTP的实例规格，这种规格基于自主研发的高性能行式存储引擎，能够对同一份数据进行OLTP和OLAP处理，实现数据的即席分析（Ad Hoc）。HybridDB for MySQL事务引擎高度兼容...
应用场景
HybridDB for MySQL（原名PetaData）是新型的HTAP（Hybrid Transaction/Analytical Processing）关系数据库，可以基于一份数据进行事务（OLTP）与分析（OLAP）混合处理，免去了在线数据库和离线数据仓库之间海量数据的复制、传输、加载和...
Profile性能诊断及优化案例
CREATE TABLE `student_info`(`s_stukey` bigint(20)NULL COMMENT"",`s_name` varchar(65533)NULL COMMENT"",`s_gender` varchar(65533)NULL COMMENT"",INDEX index1(s_gender)USING BITMAP COMMENT 'index1')ENGINE=OLAP DUPLICATE KEY(`s...
Spark概述
在线数据分析（OLAP）在线数据分析主要应用于BI（Business Intelligence）。分析人员交互式地提交查询作业，Spark可以快速地返回结果。除了Spark，常见的OLAP引擎包括Presto和Impala等。Spark 3.0的主要特性在EMR中的Spark 2.4版本已支持，...
功能特性
混合事务和分析处理（Hybrid Transaction and Analytical Process，HTAP）OceanBase 数据库独创的分布式计算引擎，能够让系统中多个计算节点同时运行 OLTP 类型的应用和复杂的 OLAP 类型的应用，让数据库利用率最大化的同时利用多个节点的...
Multi-Master基础架构
背景信息 Hybrid Transaction Analytical Processing（HTAP）是著名信息技术咨询与分析公司Gartner在2014年提出的一个新的数据库系统定义，特指兼具OLTP（事务能力）和OLAP（分析能力）的数据库系统。在传统场景中，承担OLTP任务和OLAP任务...
选型配置说明
Flink、Kafka、YARN OLAP 数据分析场景，其中核心组件ClickHouse是一个面向联机分析处理（OLAP）的开源的面向列式存储的DBMS，与Hadoop和Spark相比，ClickHouse更轻量级。ClickHouse支持线性扩展，简单方便，具有高可靠性和高容错。...
一站式HTAP服务公测公告
公测开始时间 2023年04月01日 公测结束时间 2023年05月01日 简介 PolarDB PostgreSQL版 提供了一站式的HTAP服务，通过简单的SQL就可以将OLTP引擎的数据快速迁移到内置的OLAP存储和引擎上，内置的同步链路将会自动维持两份数据的一致性。...
互联网教育：北京智启蓝墨信息技术有限公司
OLAP复杂查询切换到AnalyticDB，构建清晰规范的OLTP、OLAP分离架构。历史数据归档HBase，上层构建Spark，构建用户推荐场景。客户价值 无需改造迁移到 PolarDB，满足支撑未来几年业务增长。OLTP、OLAP分离架构，复杂查询业务从在线库切换到...
DBFS存储卷概述
DBFS可同时减少数据库直接基于块的架构复杂度和成本（例如数据库做主备容灾的场景等），提供IO加速、多点读写的多活、数据备份及保护等能力，为OLTP、OLAP及NoSQL等数据库业务提供低成本高性能的存储解决方案和最佳实践。使用限制 部分ECS...
典型场景
ETL离线数据处理 面对复杂SQL优化和海量数据大规模聚合分析等挑战，云原生数据仓库AnalyticDB PostgreSQL版 具有如下技术优势：支持标准SQL、OLAP窗口函数和存储过程。ORCA分布式SQL优化器，复杂查询免调优。MPP多节点全并行计算，PB级数据...
StarRocks
背景信息 StarRocks是新一代极速全场景MPP（Massively Parallel Processing）数据库，兼容MySQL协议的OLAP分析引擎，提供了卓越的性能和丰富的OLAP场景模型，包括OLAP多维分析、数据湖分析、高并发查询以及实时数据分析。更多关于StarRocks...
- 产品推荐
- 这些文档可能帮助您