深度解析PolarDB数据库并行查询技术

由于硬件的限制,每次IO的耗时基本是固定的,虽然有顺序IO随机IO的区别,但由于如今SSD已经普遍应用,两者的差异也在逐渐接近。那么还有没有其它方式可以加速IO呢?显然并行IO是一个简单易行的方法,如果多个线程可以同时发起IO,每个线程...

ESSD AutoPL云盘

在不同性能突发场景下,云盘的费用及性能情况不同,示例说明如下:场景一:假设在云盘使用期间仅IOPS突发了一次,突发时间持续了1s,且超出基准性能和预配置性能之和的IO突发量为8,000,则性能突发费用按10,000 IO计算(不足1万的部分按1万...

与开源PostgreSQL性能对比

基于新的硬件,实现了一整套在用户态运行的IO和网络协议栈,获得了更高的性能、更低的延迟。通过Polar CSN(Commit Sequence Number)技术,将原生PostgreSQL xid事务替换为单调递增的64位整型来提升高并发下OLTP性能。借助预读、预扩展、...

PolarDB MySQL版与RDS MySQL性能对比

基于新的硬件,实现了一整套在用户态运行的IO和网络协议栈,获得了更高的性能、更低的延迟。通过锁优化、IO路径优化、针对大表优化等内核层面的优化,实现了并发场景下的更优性能。说明 测试所用的产品为:不同规格的 PolarDB MySQL版 集群...

扩展MapReduce(MR2)

相比于传统的MapReudce,MaxCompute提供的扩展MapReduce模型(简称MR2)改变了底层的调度和IO模型,可避免作业时冗余的IO操作。与MaxCompute相比,MR2在Map、Reduce等函数编写方式上基本一致,较大的不同点发生在执行作业时,示例请参见 ...

存储资源

可以利用内存缓存系统或操作系统的文件缓存功能,提高数据的访问速度磁盘IO的利用效率。分布式存储:将数据分布到多个计算节点的存储设备上,采用分布式存储系统或数据分片的方式。这样可以分散磁盘IO负载,平衡数据访问压力,并利用多个...

使用自定义镜像创建CGroup V2节点

CGroup V2常用使用场景 使用CGroup V2限制容器IO速度"CGroup V1"对异步的"blockio"统计不准确,导致容器的IO的统计限制通常大大小于实际应用IO的量。而在"CGroup V2"中会同时将这部分异步的IO统计到正确容器中,所以我们可以采用"CGroup ...

Binlog Cache Free Flush

在有大事务的业务场景中,大事务提交时常会出现Binlog耗时过长、实例长时间不可写或夯住(hang)的问题。...可以看到,开启Binlog Cache Free Flush功能时,大事务提交的耗时被大幅缩短,提交导致的IO压力长时间持写锁的问题被彻底消除。

混合负载HTAP的实践优化

OLTP系统查询慢,存在分析型场景瓶颈的客户;读写分离需求。PolarDB-X HTAP架构更多信息,请参见 混合负载HTAP。HTAP集群 您购买的 PolarDB-X 主实例,主要面向在线通用业务场景。如果业务针对同一份数据有分析、专注离线拖数、跑批等...

存储类型

云数据库RDS MySQL提供了以下数据存储类型:ESSD云盘、本地SSD盘、SSD云盘、通用云盘,本文介绍这几种存储类型的区别及选购建议。存储类型介绍 存储类型 说明 ESSD云盘 增强型SSD云盘(Enhanced SSD云盘,下文简称ESSD云盘),是阿里云全新...

存储类型

MySQL、PostgreSQL、SQL Server、MariaDB 通用云盘 通用云盘兼容ESSD云盘的所有特性,基础能力与ESSD PL1云盘相同,在ESSD云盘的基础上提供了IO突发能力(MySQL、PostgreSQL、SQL Server支持)和IO加速能力(MySQL、PostgreSQL支持):IO...

什么是通用云盘

IO突发性能 通用云盘开启IO突发后,实例可支持的IOPS上限吞吐量上限会提升,与未开启IO突发相比,区别如下:说明 主节点开启IO突发功能后,备节点也会同时开启,只读实例不会开启,需要在只读实例详情页开启。场景 IOPS上限值 吞吐量上限...

IO突发

IO突发性能 通用云盘开启IO突发后,实例可支持的IOPS上限吞吐量上限会提升,与未开启IO突发相比,区别如下:说明 主节点开启IO突发功能后,备节点也会同时开启,只读实例不会开启,需要在只读实例详情页开启。场景 IOPS上限值 吞吐量上限...

什么是通用云盘

通用云盘的性能 通用云盘开启IO突发后,实例可支持的IOPS上限吞吐量上限会提升,与未开启IO突发相比,区别如下:说明 主节点开启IO突发功能后,备节点也会同时开启,只读实例不会开启,需要在只读实例详情页开启。场景 IOPS上限值 吞吐量...

什么是通用云盘

通用云盘的性能 通用云盘开启IO突发后,实例可支持的IOPS上限吞吐量上限会提升,与未开启IO突发相比,区别如下:说明 主节点开启IO突发功能后,备节点也会同时开启,只读实例不会开启,需要在只读实例详情页开启。场景 IOPS上限值 吞吐量...

什么是通用云盘

通用云盘的性能 通用云盘开启IO突发后,实例可支持的IOPS上限吞吐量上限会提升,与未开启IO突发相比,区别如下:说明 主节点开启IO突发功能后,备节点也会同时开启,只读实例不会开启,需要在只读实例详情页开启。场景 IOPS上限值 吞吐量...

管理通用云盘

RDS推出了适用于高IO和波动IO场景的通用云盘。相较于ESSD云盘,通用云盘开启IO突发功能后,能够在保持云盘容量不变的情况下,在业务波峰时提供更高的IO能力,使云盘的IOPS不受限于最大IOPS,从而满足IO突发业务的需求。本文介绍如何管理...

管理通用云盘

RDS推出了适用于高IO和波动IO场景的通用云盘。相较于ESSD云盘,通用云盘开启IO突发功能后,能够在保持云盘容量不变的情况下,在业务波峰时提供更高的IO能力,使云盘的IOPS不受限于最大IOPS,从而满足IO突发业务的需求。本文介绍如何将ESSD...

通过容器存储卷可观测性定位客户端IO问题

在该页面下获取应用的镜像信息,根据以上获取的 head 请求数和IO情况,修改应用。问题3:有哪些数据操作频繁的热点文件和热点文件路径?查看 OSS IO Monitoring(Cluster Level)监控大盘。获取OSS的Bucket中频繁访问的文件和文件路径。根据 ...

通用云盘IO加速功能

在兼容ESSD云盘所有特性的基础上,通用云盘采用三级存储架构对不同类型的数据和缓存进行分级管理和读写,并且引入IO突发和IO加速功能,提升了RDS实例的IO性能。更多信息,请参见 什么是通用云盘。IO加速功能介绍 功能简介 缓存池(Buffer ...

通用云盘IO加速功能

在兼容ESSD云盘所有特性的基础上,通用云盘采用三级存储架构对不同类型的数据和缓存进行分级管理和读写,并且引入IO突发和IO加速功能,提升了RDS实例的IO性能。更多信息,请参见 什么是通用云盘。IO加速功能介绍 功能简介 缓存池(Buffer ...

通用云盘IO加速功能技术介绍

在兼容ESSD云盘所有特性的基础上,通用云盘采用三级存储架构对不同类型的数据和缓存进行分级管理和读写,并且引入IO突发和IO加速功能,提升了RDS实例的IO性能。更多信息,请参见 什么是通用云盘。IO加速功能介绍 缓存池(Buffer Pool)作为...

通用云盘IO加速功能技术介绍

在兼容ESSD云盘所有特性的基础上,通用云盘采用三级存储架构对不同类型的数据和缓存进行分级管理和读写,并且引入IO突发和IO加速功能,提升了RDS实例的IO性能。更多信息,请参见 什么是通用云盘。IO加速功能介绍 缓存池(Buffer Pool)作为...

数仓版(3.0)计费项

弹性资源 弹性资源指资源弹性扩容时所使用的计算资源和IO资源。计费项 计费方式 计费说明 弹性计算资源(可选)按量付费 计费场景:创建资源弹性计划并实际执行了资源弹性扩容,会收取弹性资源费用。当资源弹性计划类型为 计算,弹性IO资源...

【新功能/规格】RDS MySQL通用云盘支持IO加速功能

云数据库RDS MySQL通用云盘支持IO加速功能,该功能可以帮助您降低数据库级别的IO时延,实现缓存加速,提升磁盘IO效率系统的响应速度。在不提升成本的情况下,您可以获得QPS的提升。简介 通用云盘的IO加速功能基于数据库缓存池拓展...

通过CNFS可观测性定位NAS或CPFS客户端IO问题

查看 Container Storage IO Monitoring(Cluster Level)监控大盘,根据 TopN_Pod_IOPS(IO/s) TopN_Pod_Throughput 面板的 read 排序,找到高IO和高吞吐的Pod。以上示例表明,名称以 eac-read-test-sts 开头对应的Pod产生了较多的读IO和...

PolarDB技术内幕

本文档介绍PolarDB云数据库的性能优点以及共享存储、物理复制使用场景中优化的过程。背景信息 传统的关系型数据库有着悠久的历史,从上世纪60年代开始就已经在航空领域发挥作用。因为其严谨的一致性保证以及通用的关系型数据模型接口,...

【新功能/规格】2024年01月29日RDS MySQL IO加速公测...

云数据库RDS MySQL通用云盘支持IO加速功能,该功能可以帮助您降低数据库级别的IO时延,实现缓存加速,提升磁盘IO效率系统的响应速度。在不提升成本的情况下,您可以获得QPS的提升。RDS MySQL通用云盘IO加速功能公测活动将于2024年01月29...

CPFS存储卷概述

功能介绍 文件存储CPFS是阿里云推出的全托管、可扩展的高性能共享文件存储系统,支持POSIX、MPI-IO和NFS协议。针对GPUCPU多机计算场景进行了深度优化,提供对数据百GB/s吞吐、亚毫秒级的访问百万级IOPS的数据读写请求,CPFS提供了统一...

CPFS存储卷概述

功能介绍 文件存储CPFS是阿里云推出的全托管、可扩展的高性能共享文件存储系统,支持POSIX、MPI-IO和NFS协议。针对GPUCPU多机计算场景进行了深度优化,提供对数据百GB/s吞吐、亚毫秒级的访问百万级IOPS的数据读写请求,CPFS提供了统一...

内核功能与接口概述

检测文件系统块层的IO hang Alibaba Cloud Linux 2所有内核版本 Alibaba Cloud Linux 3所有内核版本 IO hang是指在系统运行过程中,因某些IO耗时过长而引起的系统不稳定甚至宕机。为了准确检测出IO hang,Alibaba Cloud Linux扩展核心...

CPFS存储卷概述

功能介绍 CPFS 文件存储CPFS是阿里云推出的全托管、可扩展的高性能共享文件存储系统,支持POSIX、MPI-IO和NFS协议。针对GPUCPU多机计算场景进行了深度优化,提供对数据百GB/s吞吐、亚毫秒级的访问百万级IOPS的数据读写请求,CPFS提供了...

诊断项与诊断结果说明

实例健康诊断功能是一种自助诊断方式,可以对实例的计算服务状态、存储服务状态、网络服务状态、实例配置管理实例操作系统内相关配置进行全方位的诊断,帮助您了解实例的健康情况,及时发现并解决常见的问题。本文介绍轻量应用服务器支持...

技术面临的挑战与革新

云计算下如何平衡扩展性稳定性SLA 云计算环境下,企业个人通过开启云服务,即可以得到所需的软件功能、计算资源、存储空间,并按实际使用量付费。在业务量逐步上涨的过程中,用户需要不断提升计算存储资源来满足业务需要。因此,扩展...

RDS PostgreSQL主实例规格列表

规格族 规格代码 CPU和内存 最大连接数 最大IOPS 最大IO带宽(MB/s)存储空间 通用型 pg.n1e.1c.1m 1核 1GB 20 无法保证最大IOPS和最大IO带宽,详情请参见 关于云盘IOPS和IO带宽。ESSD PL0云盘:20 GB~30000 GB ESSD PL1云盘:20 GB~64000 ...

诊断项与诊断结果说明

如果您使用的是Alibaba Cloud Linux 2操作系统,检测IO hang的操作,请参见 检测文件系统块层的IO hang。实例磁盘加载异常 创建或挂载磁盘时出现错误。检查该实例在启动时云盘是否能正常挂载。如果挂载失败,则会导致实例无法正常启动。...

购买、变配与升级

常见问题概览 AnalyticDB for MySQL数仓版(3.0)湖仓版(3.0)的区别是什么?AnalyticDB for MySQL集群的弹性模式预留模式的区别是什么?弹性IO资源是什么,主要提供什么能力?为什么包年包月还会产生后付费的费用?AnalyticDB for ...

开启关闭通用云盘IO突发

本文介绍如何通过控制台API接口开启关闭RDS MySQL实例通用云盘的IO突发功能。前提条件 RDS MySQL实例的存储类型为通用云盘。影响 开启或关闭IO突发功能的过程中没有闪断,一般情况下对业务无影响。少数情况下实例的IOPS会有波动,建议...

ESSD云盘变更为通用云盘

通用云盘开启IO突发功能后,能够在保持云盘容量不变的情况下,在业务波峰时提供更高的IO能力,使云盘的IOPS不受限于最大IOPS,满足IO突发业务的需求。您可以将任何PL等级的ESSD云盘变更为通用云盘,提升云盘的IO性能。本文介绍如何将ESSD云...

检测文件系统块层的IO hang

0 1#左边参数表示产生IO hang的读IO的个数,右边参数表示产生IO hang的写IO的个数 示例三 您可以调用接口/sys/kernel/debug/block/<device>/rq_hang 获取产生IO hang的详细信息。本示例中的磁盘为 vdb。查询命令如下。cat/sys/kernel/debug...
共有82条 < 1 2 3 4 ... 82 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库文件存储 弹性公网IP 短信服务 人工智能平台 PAI 物联网平台 对象存储
新人特惠 爆款特惠 最新活动 免费试用