X-Engine简介

数据组织 X-Engine的每层都划分成固定大小的Extent,存放每个层次中的数据的一个连续片段(Key Range)。为了快速定位Extent,为每层Extents建立了一套索引(Meta Index),所有这些索引,加上所有的memory tables(active/immutable)一起...

什么是EMR Serverless StarRocks

数据湖分析 StarRocks不仅高效的分析本地存储的数据,也可以作为计算引擎直接分析数据湖中的数据,支持Apache Hive、Apache Iceberg、Apache Hudi等数据组织结构;支持Parquet、ORC、CSV等文件格式;也支持HDFS、S3、OSS等存储方式。在...

技术面临的挑战与革新

新增加的节点,直接访问共享的数据副本,不需要做任何数据拷贝,所以扩充节点的耗时可以达到1分钟,而与数据量无关。PolarDB同时内置Proxy能力,可以将负载均衡到各个节点,使得加减节点操作对业务透明。在存储层,所有用户共享一个规模...

更新分析存储的数据生命周期

如果希望分析存储中的数据永不过期,可以设置为-1。示例 以下示例用于更新test_timeseries_table时序表下名为test_analytical_store分析存储的数据生命周期为30天(即2592000秒)。public void updateAnalyticalStore(TimeseriesClient ...

更新分析存储的数据生命周期

如果希望分析存储中的数据永不过期,可以设置为-1。示例 以下示例用于更新test_timeseries_table时序表下名为test_analytical_store的分析存储配置信息,将数据生命周期更新为30天(即2592000秒)。func UpdateTimeseriesAnalyticalStore...

创建存储过程

CREATE PROCEDURE 命令可定义并命名一个将存储数据中的独立存储过程。如果包括 schema 名称,则在指定的 schema 中创建存储过程。否则在当前 schema 中创建。新存储过程的名称不得与同一 schema 中具有相同输入参数类型的任何现有存储...

计算与分析概述

分析工具 适用模型 操作 描述 MaxCompute 宽表模型 使用MaxCompute 通过MaxCompute客户端为 表格存储 的数据表创建外部表,即可访问 表格存储 中的数据。Spark 宽表模型 使用Spark计算引擎 使用Spark计算引擎时,支持通过E-MapReduce SQL...

列存索引技术架构介绍

目前,白名单规则校验的内容包含SQL语句中的数据类型、算子、计算表达式以及其他场景。其他场景如不支持multi statement等。MySQL已经发展了数十年,其支持的各种列类型和SQL语法非常丰富。在IMCI中,初期重点优化在分析型查询语句中最常见...

PolarDB HTAP实时数据分析技术解密

该执行框架充分利用列式存储的优势,例如,以一个4096行的Batch为单位访问存储的数据,使用SIMD指令提升CPU单核处理数据的吞吐量,所有关键算子均支持并行执行。对比MySQL原有的行存执行,性能有数量级的提升。支持行列混合执行的...

术语表

全局二级索引(Global Secondary Index,简称GSI)全局的二级索引,索引中的数据按照指定的拆分方式分布在各个存储节点上。聚簇索引 一种特殊的全局二级索引,默认覆盖列包含主表的所有列,所有查询均不用回表,从而避免回表带来的额外开销...

审计配置

该Logstore中的数据默认存储3天,此时产生的存储费用由SLS产品计费并收取,具体计费规则参见 计费概述。DSC会将转储使用的Logstore中的SQL洞察原始日志投递到另一个由DSC新创建的Logstore。该Logstore默认存储数据的时间为90天,且该...

变更配置

本文介绍如何变更RDS SQL Server实例配置,包括存储类型、实例规格、存储空间。说明 RDS SQL Server Serverless实例变更配置,请参见 变更计算资源扩缩范围(RCU)和 增加存储空间。变更项 如果您需要横向扩展数据库的读取能力,请参见 SQL...

创建与释放全球多活数据库集群

Ignore(遇到冲突,直接使用目标实例中的冲突记录)当数据同步遇到主键冲突时,直接跳过当前同步语句,继续往下执行,选择使用目标库中的冲突记录。同步任务不会中断。Overwrite(遇到冲突,直接覆盖目标实例中的冲突记录)当数据同步遇到...

PolarDB PostgreSQL版架构介绍

HTAP架构原理 PolarDB PostgreSQL版 底层存储在不同节点上是共享的,因此不能直接像传统MPP一样去扫描表。PolarDB PostgreSQL版 在原来单机执行引擎上支持了MPP分布式并行执行,同时对Shared-Storage进行了优化。基于Shared-Storage的MPP是...

常见问题

PolarDB MySQL版 默认使用X-Engine,可以提供强大的数据压缩能力,以满足归档数据库低存储成本的要求。更多详情,请参见 历史库概述。Q:是否支持自建Slave实例,是否有推荐的实现方式?A:支持。启用Binlog后可以将 PolarDB MySQL版 同步...

创建分析存储

如果希望分析存储中的数据永不过期,可以设置为-1。您可以通过UpdateTimeseriesAnalyticalStore接口修改。syncOption 分析存储同步选项。取值范围如下:SYNC_TYPE_FULL表示同步全部数据到分析存储。SYNC_TYPE_INCR表示同步增量数据到分析...

创建分析存储

如果希望分析存储中的数据永不过期,可以设置为-1。您可以通过UpdateTimeseriesAnalyticalStore接口修改。syncOption 分析存储同步选项。取值范围如下:SYNC_TYPE_FULL表示同步全部数据到分析存储。SYNC_TYPE_INCR表示同步增量数据到分析...

CREATE PROCEDURE

定义新存储过程。语法 CREATE[OR REPLACE]PROCEDURE name[(parameters)][IMMUTABLE|STABLE|VOLATILE|DETERMINISTIC|[NOT]LEAKPROOF|CALLED ON NULL INPUT|RETURNS NULL ON NULL INPUT|STRICT|[EXTERNAL]SECURITY INVOKER|[EXTERNAL]...

升级步骤

刷新页面,当目标 PolarDB 读写状态 显示为 读写 后,尽快修改应用中的数据库连接地址。说明 升级切换完成后,如果您发现数据存在异常等问题,可以进行回滚操作,快速恢复至升级前的状态也可以选择 升级回滚。架构升级完成并切换完成后,为...

购买包年包月集群

PSL4:PolarDB全新推出的存储类型,采用阿里巴巴自研的 硬件压缩盘(Smart-SSD)技术,在物理SSD磁盘层面压缩、解压缩存储的数据,保持性能影响可控的情况下,使单位容量数据的存储价格更低。说明 对于已创建的集群,存储类型不支持切换。...

控制台发布记录

2023-08-17 存储包支持抵扣二级备份、日志备份、冷数据存储及PL0云盘存储用量,调整部分抵扣因子 价格计算和资源包计算上线 PolarDB发布了资源包计算和价格计算,帮助您了解产品价格,估算费用情况,帮助您进行产品选型。...

购买按量付费集群

PSL4:PolarDB全新推出的存储类型,采用阿里巴巴自研的 硬件压缩盘(Smart-SSD)技术,在物理SSD磁盘层面压缩、解压缩存储的数据,保持性能影响可控的情况下,使单位容量数据的存储价格更低。说明 对于已创建的集群,存储类型不支持切换。...

购买包年包月集群

PSL4:PolarDB全新推出的存储类型,采用阿里巴巴自研的 硬件压缩盘(Smart-SSD)技术,在物理SSD磁盘层面压缩、解压缩存储的数据,保持性能影响可控的情况下,使单位容量数据的存储价格更低。说明 对于已创建的集群,存储类型不支持切换。...

购买按量付费集群

PSL4:PolarDB全新推出的存储类型,采用阿里巴巴自研的 硬件压缩盘(Smart-SSD)技术,在物理SSD磁盘层面压缩、解压缩存储的数据,保持性能影响可控的情况下,使单位容量数据的存储价格更低。说明 对于已创建的集群,存储类型不支持切换。...

设置数据冷热存储策略

如果您想要以指定规则对文件引擎中存储的数据进行归档,将冷热数据分开存储,可以通过命令设置冷热存储策略,按照目录级别对数据进行划分。冷热分离可以有效提高热数据的查询效率,减少冷数据的存储成本。本文介绍通过开源HDFS客户端设置...

计量计费项

使用表格存储中的数据读写,索引的写入、查询、分析,通道服务等操作均会消耗VCU的计算资源。重要 SQL本身不会有额外的费用,但是使用SQL查询数据过程中涉及到的表扫描、索引查询等操作会消耗VCU的计算资源。数据存储量 说明 当数据量较大...

Location托管

Location托管可以将数据湖OSS中的存储数据托管到数据湖构建(DLF)中进行管理和分析,在托管Location后将可以为你提供 存储概览,生命周期管理介绍,数据表-数据概况(如数据访问频次,数据最后更新时间等),以及存储权限(规划中)等数据...

购买按量付费集群

PSL4:PolarDB 全新推出的存储类型,采用阿里巴巴自研的 硬件压缩盘(Smart-SSD)技术,在物理SSD磁盘层面压缩、解压缩存储的数据,保持性能影响可控的情况下,使单位容量数据的存储价格更低。说明 对于已创建的集群,存储类型不支持切换。...

购买包年包月集群

PSL4:PolarDB 全新推出的存储类型,采用阿里巴巴自研的 硬件压缩盘(Smart-SSD)技术,在物理SSD磁盘层面压缩、解压缩存储的数据,保持性能影响可控的情况下,使单位容量数据的存储价格更低。说明 对于已创建的集群,存储类型不支持切换。...

资源预估选型

使用表格存储中的数据读写,索引的写入、查询、分析,通道服务等操作均会消耗VCU的计算资源。通过QPS近似评估VCU的建议请参见下表。由于计算资源的消耗涉及较多因素,请结合实际业务评估VCU。重要 读写行的大小,请求的Cache命中率、Filter...

购买按量付费集群

如果开启存储热备集群和计算Standby,PolarDB 会在当前地域同时部署主集群(包含主备计算节点+主存储)和存储热备集群,并在存储热备集群上启动计算节点(计算节点和主集群的读写节点规格及定价一致)。主集群和存储热备集群各保证3副本...

购买包年包月集群

如果开启存储热备集群和计算Standby,PolarDB 会在当前地域同时部署主集群(包含主备计算节点+主存储)和存储热备集群,并在存储热备集群上启动计算节点(计算节点和主集群的读写节点规格及定价一致)。主集群和存储热备集群各保证3副本...

冷热分离

该属性的含义是优先查询热存储中的数据,若热存储中的数据查完了,用户仍然在调用next获取下一条数据,则会开始查询冷数据。Shell hbase(main):002:0>scan 'chsTable',{COLD_HOT_MERGE=>true} Java scan=new Scan();scan.setAttribute...

功能概述

通过表格存储控制台查看监控数据 配置监控指标报警 备份与恢复 通过混合云备份HBR(Hybrid Backup Recovery)定期备份 表格存储 实例中的数据,并在数据丢失或受损时及时恢复。HBR支持全量与增量数据备份,同时支持数据冗余机制,可以提高...

功能特性

如果您在表格存储中的数据有着独特的结构,希望自定义开发逻辑来处理每一行数据,例如解析特定的JSON字符串,您可以使用用户自定义函数UDF(User Defined Function)来处理表格存储中的数据。MaxCompute Spark 使用Spark计算引擎时,支持...

常见问题

如果您想对存储在NAS中的数据进行备份,通用型NAS可开启备份和回收站功能,极速型NAS可开启备份和快照功能。更多信息,请参见 通用型NAS备份、回收站、快照。NAS是否支持在非阿里云计算节点中挂载?阿里云文件存储NAS是面向阿里云ECS实例、...

功能特性

管理存储空间标签 使用自有域名访问OSS资源 OSS支持绑定自定义域名功能,您可以将自定义域名绑定到OSS存储空间,并使用自定义域名访问存储空间中的数据。如果您需要通过HTTPS的方式访问OSS,可以通过OSS托管您的证书。绑定自定义域名 证书...

整体架构

为满足不同场景需求,首先将一份全量数据存储在低成本高吞吐存储介质中,低成本离线处理场景直接读写低成本存储介质中的数据,可降低数据存储和数据IO成本,保证高吞吐。其次将实时数据存储在单独的存储IO节点(EIU)上,保证行级的数据...

如何优化高并发IM系统架构

新架构中自增操作是在表格存储系统内部处理的,就算多个应用服务器同时给表格存储中的同一个接收方写数据,表格存储内部也保证这些消息是串行处理,每个消息都有一个独立的消息ID,且严格递增。使用主键列自增功能,就不再需要队列服务,...

创建存储空间

本地冗余存储 采用单可用区(AZ)内的数据冗余存储机制,将用户的数据冗余存储在同一个可用区内多个设施的多个设备上,确保硬件失效时的数据持久性和可用性。同城冗余存储(推荐)采用多可用区(AZ)内的数据冗余存储机制,将用户的数据...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 Redis 版 云数据库 RDS 数据库备份 DBS 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用