cache存储器工作原理-cache存储器工作原理文档介绍内容-阿里云

Partial Result Cache（PTRC）

本文介绍了PTRC的概念、工作原理、如何基于代价选择PTRC以及PTRC的动态反馈机制等内容。PTRC 概念 PTRC是针对一个查询内部算子级别粒度的结果集缓存特性，比如缓存Correlated subquery或NestLoopJoin等算子执行的临时结果，后续再次执行该...

Page Cache限制功能

工作原理 开启Page Cache限制功能后，memcg粒度的工作原理如下。当memcg进程分配Page Cache时，判断当前memcg的Page Cache是否超过限制，并从当前memcg开始往上遍历，逐级检查父memcg的 memory.pagecache_limit 值，如果该值为0，表示父...

使用OSS加速器

工作原理 加速器创建完成后会拥有一个地域专属的内网加速域名。例如华北2（北京）地域的加速域名为 http://cn-beijing-internal.oss-data-acc.aliyuncs.com 。当您与加速器在同一专有网络VPC时，您可以通过加速域名访问加速器内的资源，...

什么是对象存储OSS

OSS工作原理数据以对象（Object）的形式存储在OSS的存储空间（Bucket）中。如果要使用OSS存储数据，您需要先创建Bucket，并指定Bucket的地域、访问权限、存储类型等属性。创建Bucket后，您可以将数据以Object的形式上传到Bucket，并指定...

常见问题

云存储网关文件网关的缓存工作原理是什么？反向同步和极速同步：如何通过极速同步即时处理OSS上传对象？如何通过极速同步在多个网关直接实现数据共享？如何在日志监控中查看网关文件同步列表？文件网关反向同步的使用场景及配置是什么？...

操作指南FAQ

云存储网关文件网关的缓存工作原理是什么？反向同步和极速同步：如何通过极速同步即时处理OSS上传对象？如何通过极速同步在多个网关直接实现数据共享？如何在日志监控中查看网关文件同步列表？文件网关反向同步的使用场景及配置是什么？...

测试模型

本章节为您介绍本次表格存储性能测试的测试模型。表结构主键名类型编码方式长度 userid string 4-Byte-Hash+Long.toHexString 20 属性列属性列名类型长度 field0 string 100 field1 string 100 field2 string 100 field3 string 100...

Cache API

工作原理 通过ER内置的CacheAPI，您可以将ER处理后的结果或从源站获取的数据缓存到DCDN，供其他访问到同节点的请求复⽤，以减少重复的计算或⽹络请求。ER和DCDN缓存的关系示意图如下：API标准 Cache基本尽可能地遵循标准 Cache。但由于边缘...

Cache API

工作原理 通过ER内置的CacheAPI，您可以将ER处理后的结果或从源站获取的数据缓存到DCDN，供其他访问到同节点的请求复⽤，以减少重复的计算或⽹络请求。ER和DCDN缓存的关系示意图如下：API标准 Cache基本尽可能地遵循标准 Cache。但由于边缘...

Cache API

工作原理 通过ER内置的CacheAPI，您可以将ER处理后的结果或从源站获取的数据缓存到DCDN，供其他访问到同节点的请求复⽤，以减少重复的计算或⽹络请求。ER和DCDN缓存的关系示意图如下：API标准 Cache基本尽可能地遵循标准 Cache。但由于边缘...

媒体处理概述

工作原理 离线转码：将视频文件上传到OSS存储空间，创建媒体处理任务，任务执行成功后，转码后的文件存储在OSS中。边转边播：将视频文件上传到OSS存储空间，创建边转边播播放列表，立即播放，对视频实时按需转码并存储在OSS中。处理参数 ...

通过缓存优化性能

有关示例和更多详细信息，请参见 Databricks Runtime 7.x：CACHE（Databricks上的Delta Lake）Databricks运行时5.5 LTS和6.x：CACHE（Databricks上的Delta Lake）监控Delta缓存您可以在Spark UI的“存储”选项卡中的每个执行器上检查Delta...

通过命令行工具快速使用云存储网关软件版

具体操作如下：线上云存储网关软件版：在创建云存储网关软件版的地域，已有可用的云服务器ECS作为客户端机器。具体操作，请参见创建ECS实例。说明线上云存储网关软件版当前支持的地域：cn-hangzhou，cn-shanghai，cn-qingdao，cn-beijing...

X-Engine简介

造成这种现象的原因是近年来我们所依赖的硬件体系发生了巨大的变化，例如多核（众核）CPU、新的处理器架构（Cache/NUMA）、各种异构计算设备（GPU/FPGA）等，而架构在这些硬件之上的数据库软件却没有太大的改变，例如使用B-Tree索引的固定...

RDS MySQL查询缓存（Query Cache）的设置和使用

不缓存存储函数（Stored Function）、存储过程（Stored Procedure）、触发器（Trigger）、事件（Event）中的查询。不缓存含有每次执行结果变化的函数的查询，比如now()、curdate()、last_insert_id()、rand()等。不缓存对mysql、...

RDS MySQL查询缓存（Query Cache）的设置和使用

不缓存存储函数（Stored Function）、存储过程（Stored Procedure）、触发器（Trigger）、事件（Event）中的查询。不缓存含有每次执行结果变化的函数的查询，比如now()、curdate()、last_insert_id()、rand()等。不缓存对mysql、...

返回信息示例如下：{."bytes belonging to page images in the cache":6511653424,"bytes belonging to the cache overflow table in the cache":65289,"bytes currently in the cache":8563140208,"bytes dirty in the cache cumulative":...

持续的存储优化

为了更有效地利用存储支出，您每个月都应该进行存储优化工作。您可以通过以下方式简化这项工作：建立用于优化存储和设置存储策略的持续机制。通过监控服务和账单密切监控存储成本。使用对象标签和生命周期策略，在整个数据生命周期中持续...

产品架构

存储引擎Storage Engine（SE）主要用于管理和处理数据，包括创建、查询、更新和删除（简称 CRUD）数据等，关于存储引擎详细的技术原理请参见 Hologres存储引擎技术揭秘。Cache（缓存）主要是结果缓存，提高查询性能。HOS Scheduler 轻量级...

存储空间概述

在上传数据（例如文档、图片、音视频等）到OSS之前，您需要在OSS所支持的地域中创建一个存储空间（Bucket），然后将无限数量的对象（Object）上传到该Bucket中。背景信息 Bucket和Object都是OSS资源，OSS提供了相关的API接口来管理这些资源...

存储空间地域属性

OSS存储空间（Bucket）地域属性分为有地域属性和无地域属性。有地域属性Bucket 有地域属性Bucket适用于OSS通用场景。您在创建Bucket时需选择有地域属性，并指定Bucket所在的具体Region，例如华东1（杭州）。更多信息，请参见访问域名和...

多元索引介绍

多元索引（Search Index）基于倒排索引和列式存储，可以解决大数据的多维查询和统计分析难题。当日常业务中有非主键列查询、多列组合查询、模糊查询等多维查询需求以及求最值、统计行数、数据分组等数据分析需求时，您可以将这些属性作为...

服务器端加密

本文介绍服务器端加密的工作原理、支持的地域及相关操作。使用限制仅支持在创建文件系统时开启数据加密功能。已开启数据加密功能的文件系统不能关闭此功能。加密方式当您对文件存储有高安全性或者合规性要求时，建议您开启服务器端加密...

Binlog Cache Free Flush

实现原理 Binlog Cache介绍 Binlog Cache是一块会话级别的临时空间，即为每一个会话建立一个Binlog Cache，用来暂存Binlog events。Binlog Cache由内存缓存（Buffer）和临时文件（Temp File）两部分组成，其中内存缓存的大小由binlog_cache...

使用函数计算

通过函数计算访问表格存储，对表格存储增量数据进行实时计算。背景信息函数计算（Function Compute，简称FC）是事件驱动的全托管计算服务。使用函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码或镜像。函数计算为您准备...

为什么云存储网关与OSS上的文件不一致

工作原理 详情请参见基于按需扫描机制的常规反向同步。详情请参见基于消息通知的极速同步。详情请参见基于API触发的单次反向同步。基于按需扫描机制的常规反向同步云存储网关默认采用基于按需扫描机制的反向同步功能，将OSS上的变化...

数据缓存

概述 File Cache通过缓存最近访问的远端存储系统（HDFS或对象存储）的数据文件，可加速后续访问相同数据的查询。在频繁访问相同数据的查询场景中，File Cache可以避免重复访问远端数据的开销，提升热点数据的查询分析性能和稳定性。原理 ...

存储过程

本文介绍了存储过程的原理和使用方法。功能介绍存储过程（Stored Procedure）是一组为了完成特定功能的SQL语句集，您可以通过指定存储过程的名字并给定参数（如果该存储过程带有参数）来调用执行它。原理存储过程会被持久化到Meta center...

数据加密

具体工作原理如下图所示。使用用户自主管理密钥使用用户自主管理密钥时，需要您自主生成并保管加密密钥。当本地客户端加密Object时，由用户自主上传加密密钥（对称加密密钥或者非对称加密密钥）至本地加密客户端。其具体加密过程如下图所...

概述

基于Tablestore Sink Connector，您可以将Apache Kafka中的数据批量导入到表格存储（Tablestore）的数据表或者时序表中。背景信息 Kafka是一个分布式消息队列系统，不同的数据系统可以通过Kafka Connect工具将数据流输入Kafka和从Kafka获取...

高级管理FAQ

删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见创建数据...