查询性能优化指导

本文介绍在不同操作场景下使用 云原生数据仓库AnalyticDB PostgreSQL版 时的一些具体建议。选择合适的操作实践将有效地帮助您提高 AnalyticDB PostgreSQL 的性能。收集统计信息 两种优化器的选择 使用索引加速查询 查看执行计划 数据倾斜的...

批量或异步插入数据

此示例使用默认用户 default,如果您创建了不同的用户,请替换用户名:ALTER USER default SETTINGS async_insert=1 使用 INSERT 查询的 SETTINGS 子句来指定异步插入设置。INSERT INTO YourTable SETTINGS async_insert=1,wait_for_async_...

列存索引中TopK算子的实现

在海量数据求TopK是一个很经典的问题,特别是衍生出的深翻页查询,给分析型数据库带来了很大的挑战。本文将介绍 PolarDB MySQL版 的列存索引(In Memory Column Index,IMCI)特性如何应对这样的挑战。背景 业务系统中普遍存在这样一种...

回切至本地物理机

本文主要介绍如何利用阿里云连续复制型容灾(CDR)服务,在本地虚拟机出现问题后把云恢复出来的ECS回切到用户本地数据中心的物理服务器。前提条件 服务器已进入实时复制状态。更多信息,请参见 启动复制。背景信息 目前阿里云的混合...

列存索引内存管理介绍

该统一接口的功能如下:统计实际内存使用量 block即将分配内存的查询操作 kill即将分配内存的查询操作 系统从完全自由运行到开始终止查询需经历如下三个阶段:当系统内存低于 ExecutionMemoryLimit*BlockMemoryThreshold(现在固定为0.8)...

使用查询隔离池

使用Elasticsearch进行查询时,您可能经常遇到这种问题:向集群发送了一条慢查询,占满了所有的节点资源,导致CPU占满或者内存溢出,影响线业务。针对这类问题,阿里云Elasticsearch开发了慢查询隔离池功能,实现对单条查询请求进行...

查询(SUBQUERY)

当您需要在某个查询的执行结果基础进一步执行查询操作时,可以通过子查询操作实现。本文为您介绍MaxCompute支持的子查询的定义与使用方法。功能介绍 子查询指在一个完整的查询语句中,嵌套若干个不同功能的查询,从而一起完成复杂...

向量计算函数

文本、语音、图像、视频都能够以向量的形式保存在向量数据库中,方便用户快速搜索和查询。日志服务支持向量计算函数,本文介绍向量函数的基本语法和示例。向量计算函数列表 重要 以下函数中使用的向量元素,可以用特定格式的字符串来描述,...

查询诊断

如何查看和升级内核版本以及内核版本,请参见 查看内核版本 和 版本升级。注意事项 慢查询日志默认保留一个星期的数据,但不会记录失败的查询。它记录所有执行时间超过GUC slow_query_min_duration 参数设置(默认值是1秒)的SQL语句,...

HybridDB for MySQL设计和实践优化建议

当用户在使用HybridDB for MySQL进行数据库设计和实践的过程中,我们有如下建议:分区键的选择 分区键是数据库控制数据分布的维度,以该条件进行等值查询查询范围只会限制在一个存储分区,通常选择查询最频繁的列,或数据分布最均匀的...

WITH查询(公共表表达式)

后一种选择存在重复计算 WITH 查询的风险,但它仍然能提供净节省,如果 WITH 查询的每个使用只需要 WITH 查询的完整输出的一部分。这些规则的一个简单示例如下:WITH w AS(SELECT*FROM big_table)SELECT*FROM w WHERE key=123;这个 WITH ...

云数据库查询优化

再往下翻页的过程中,不再支持随机翻页,仅支持向下翻一个较的页数,这样就可以在已经查询出结果的基础使用find+RangeQuery+Skip(少量)+Limit+Sort的方式来快速查询到结果。例如当您已经查询出第13页的数据后,再次查询第17页的...

优化MaxCompute外部表的查询性能

尤其是在实例既有写入又有查询的时候,不建议直接设置为1,会导致负载集中在某些Worker引发实例OOM。调整每次query命中的分区数大小,默认512,最大为1024,不建议调整太大,会影响查询性能 set hg_foreign_table_max_partition_limit=128...

设置优化器的Join Reorder

为了提高列存索引(IMCI)处理复杂查询的能力,列存索引优化器通过结合变换规则与表中各个列的统计信息,基于代价生成高效的执行计划,以此来增强自身的优化器能力。本文介绍列存索引查询优化功能的工作原理、使用方法以及使用限制等内容。...

如何使用Prometheus监控Windows

本文介绍如何使用Prometheus监控Windows。前提条件 已将VPC实例接入 可观测监控 Prometheus 版。具体操作,请参见 Prometheus实例 for ECS。使用限制 目前仅Prometheus实例 for ECS类型实例支持该组件接入。Windows Metric监控参考模型 ...

如何使用Prometheus监控Windows

本文介绍如何使用Prometheus监控Windows。前提条件 已将VPC实例接入 可观测监控 Prometheus 版。具体操作,请参见 Prometheus实例 for ECS。使用限制 目前仅Prometheus实例 for ECS类型实例支持该组件接入。Windows Metric监控参考模型 ...

分配辅助私网IP地址

操作场景 分配辅助私网IP地址适用于以下场景:多应用场景:在ECS实例托管了多个应用时,您可以为每个应用分配各自的辅助私网IP地址,每个应用对外均呈现一个独立的IP地址,实现在同一台ECS实例提供多项服务,提升实例的利用率。...

云监控控制台查看监控

云数据库ClickHouse 监控项 说明 连接数使用比例 客户端的使用连接数与最多可使用连接数的比值。连接数 连接集群的客户端个数。cpu使用率 集群各节点的CPU使用率。磁盘空间已用比例 磁盘空间的使用量与最多可使用磁盘空间容量的比值。磁盘...

读取数据

读取数据时,请根据实际查询场景使用相应查询方式读取数据。重要 当要读取带有自增主键列的表数据时,请确保已获取到包含自增主键列值在内的完整主键。更多信息,请参见 主键列自增。如果未记录自增主键列的值,您可以使用范围读取数据按照...

JindoFS实战演示

Presto如何高效查询OSS数据 Presto如何高效查询OSS数据 2021-06-08 Presto是一个开源的分布式SQL查询引擎,能够在任何存储介质进行查询,支持原地查询,无需迁移数据。如果您已将HDFS数据迁移至OSS中,可通过在Presto中使用JindoFS SDK,...

查询(SUBQUERY)

当您需要在某个查询的执行结果基础进一步执行查询操作时,例如单独计算聚合值、检查某条记录的存在性、筛选基于另一查询结果的数据、关联更新或删除操作、简化JOIN操作以获取单个值、作为派生表给主查询使用、提供排序或分组的依据以及...

阿里邮箱AD同步&认证

使用Microsoft Exchange自建电子邮件系统的企业,AD系统作为电子邮件系统的认证平台。作为办公环境的信息中心,AD账号已经关联诸多应用,可谓牵一发而动全身。实现AD账号同步创建对应的阿里邮箱组织架构,邮件系统实现平滑迁移并保持AD账号...

读取数据

表格存储 提供了单行读取、批量读取、范围读取、迭代读取和并行读取的查询方式用于读取数据表中数据。数据写入到数据表后,您可以选择所需数据查询方式进行数据读取。如果需要了解 表格存储 各场景的应用案例,请参见 快速玩转Tablestore...

DescribeDisks-查询已经创建的块存储

支持以下两种方式查看返回数据:方式一:通过 NextToken 设置查询凭证(Token),其取值是一次调用 DescribeDisks 返回的 NextToken 参数值,再通过 MaxResults 设置单页查询的最大条目数。方式二:通过 PageSize 设置单页返回的条目数,...

RDS无法查看新插入数据

问题描述 新插入的数据查询不到 问题原因 只读实例存在延迟 事务没有提交 RR隔离级别在已开启的事务中进行的查询 解决方案 一、只读实例存在延迟 1)只读实例规格过 建议您升级只读实例规格,使只读实例的配置大于或者等于主实例的配置,...

查看性能监控指标

复制延迟 展示所选择节点RW的数据复制到RO的复制延迟。InnoDB Data读写吞吐量 展示所选择节点的InnoDB平均每秒读字节数和写字节数。InnoDB Buffer Pool请求次数 展示所选择节点的InnoDB平均每秒从Buffer Pool读取页的次数(逻辑读)和...

数据查询

使用Ganos API进行时空查询时,首先需要构建一个org.geotools.data.Query对象,并指定过滤条件、返回列名,排序等相关参数,然后通过DataStore提交Ganos集群运行,最后查询结果会以SimpleFeature集合的形式返回给用户。CQL通用查询语言 ...

性能参数调优

max_statement_mem 千字节数 Reload Config生效(seghost_physical_memory)/(average_number_concurrent_queries)设置查询的最大内存限制。将 statement_mem 设置得太高,有助于在查询处理期间避免segment主机的内存不足的错误。当 gp_...

冷热分离

在用户的访问方式和访问普通表没有任何差异,在查询的过程中,用户只需配置查询的Hint或者TimeRange,系统会根据条件自动地判断数据应该在热数据区还是冷数据区。原理介绍 用户在表配置数据冷热时间分界点后,HBase增强版会依赖用户...

表操作篇

前几个月的表由于不再写入新数据或者写入的新数据量较少,查询的请求较多,因此前几个月的消费记录表可以设置较的预留写吞吐量,较大的预留读吞吐量。而历史超过一年的消费记录表,由于再被使用的可能性不大,可以设置较的预留读/写...

单实例Shard级多副本

本文将为您介绍在Hologres中Shard级别的Replication使用。功能概述 从Hologres V1.1版本开始,支持通过设置Table Group副本数的方式来提高某个Table Group查询并发能力和可用性。您可以在创建Table Group的时候通过显式指定的replica count...

2021年

物化视图自动查询改写 使用实时物化视图加速带可变参数的查询 支持在分区表中使用实时物化视图。实时物化视图 分区表 支持使用INSERT ON CONFLICT语句在分区表中覆盖写入数据。使用INSERT ON CONFLICT覆盖写入数据 支持使用COPY ON ...

与标准SQL的主要区别及解决方法

MaxCompute SQL与标准SQL的基本区别 主要区别 问题现象 解决方法 应用场景 不支持事务(不支持Commit和Rollback,不推荐使用INSERT INTO)。建议代码具备幂等性,支持重新执行。推荐您使用INSERT OVERWRITE写数据。不支持索引和主键约束。...

使用Resource Queue(资源队列)进行负载管理

使用Resource Queue可以对云原生数据仓库PostgreSQL版的系统资源进行管理或隔离,本文将介绍如何在云原生数据仓库PostgreSQL版中创建和使用Resource Queue。Resource Queue介绍 一个数据库实例的CPU资源和内存资源是有限的,这些资源影响着...

SQL查询

如果需要快速地对数据进行查询与分析,您可以使用SQL语句查询MaxCompute、EMR Hive、Hologres等数据源。本文为您介绍如何通过SQL语句查询数据源。支持查询的数据源 SQL查询支持的数据源包含MaxCompute、Hologres、EMR Hive、EMR Spark SQL...

连接管理

创建5G高速云服务(CC5G)实例后,您需要为5G高速云服务实例添加一组物联网卡,物联网终端插入该物联网卡之后可以实现私网访问阿里云。申请物联网卡 登录 5G高速云服务管理控制台。在 实例列表 页面,找到目标5G高速云服务实例,在...

分析Nginx访问日志

针对此问题,您可以使用数学统计中的百分数(例如99%最大延时)来作为告警触发条件,例如使用如下查询分析语句计算99%分位的延时大小。Method:Post and URL:"/adduser"|select approx_percentile(Latency,0.99)as p99 在监控场景中,您可以...

常见问题

如何处理max_execution_time超时问题 一般查询的执行超时时间,DMS平台默认设置是7200s,jdbc driver、DataGrip默认是30s。超时限制触发之后查询会自动取消。用户可以进行查询级别更改,例如 select*from system.numbers settings max_...

Hudi概述

Apache Hudi是一种数据湖的存储格式,在Hadoop文件系统之上提供了更新数据和删除数据的能力以及消费变化数据的能力。Hudi表类型 Hudi支持如下两种表类型:Copy On Write 使用Parquet格式存储数据。Copy On Write表的更新操作需要通过重写...

分区

分区表是指拥有分区空间的表,即将表数据按照某个列或多个列进行划分,从而将表中的数据分散存储在不同的物理位置。合理设计和使用分区,可以提高查询性能、简化数据管理,并支持更灵活的数据访问和操作。概述 分区可以理解为分类,通过...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
应用实时监控服务 云投屏 弹性公网IP 短信服务 人工智能平台 PAI 物联网平台
新人特惠 爆款特惠 最新活动 免费试用