概述
从层次结构方面来看，列存引擎节点采用Delta+Main（类LSM结构）二层模型，采用了标记删除的技术，确保了行存和列存之间实现低延时的数据同步，可以保证秒级的实时更新。数据实时写入到MemTable，在一个group commit的周期内，会将数据存储...
核心概念的层次结构
MaxCompute具有层次结构，您可以通过了解其结构，为后期项目规划、安全管理等提供思路。本文为您介绍MaxCompute中核心概念的层次结构及简要含义。MaxCompute核心概念的层次结构如下。核心概念 说明 Project（项目）项目是MaxCompute的基本...
示例应用程序中的组织树
emp表的行根据mgr列构成层次结构，该列包含员工经理的员工编号。每个员工最多有一名经理。KING是公司总裁，所以KING没有经理，因此KING的mgr列为null。此外，一个员工也可能担任多个员工的经理。这种关系形成了一个典型的树结构层次组织...
块关系
术语 块是基本 SPL 结构，该结构由可选的声明部分、必需的可执行部分和可选的异常部分组成。块实现独立的存储过程和函数程序、匿名块、触发器、包、子存储过程和子函数。标识符（变量、游标、类型或子程序）是块本地的，意味着它在给定块的...
概述
通过将SPL代码组织为子存储过程和子函数，可以有利地运用SPL存储过程和函数程序的能力和功能来构建结构良好且易于维护的程序。通过在SPL程序中声明子存储过程和子函数，可从相对较大的SPL程序中的不同位置多次调用相同的SPL代码。子存储...
基本概念
域名的分层结构 由于因特网的用户数量较多，所以因特网在命名时采用的是层次树状结构的命名方法。任何一个连接在因特网上的主机或路由器，都有一个唯一的层次结构的名字，即域名（domain name）。这里，“域”（domain）是名字空间中一个可...
快速入门
维度包含维度值、节点两层结构，类似于文件夹和文件的结构，只有维度可以标记资源实例，节点用来构建树结构，最多支持5层结构。可以依据组织、部门、项目、成本中心等业务树创建维度树，当业务调整时，不需要更改维度和资源实例的关联关系...
X-Engine简介
在持久化层如何实现高效，就需要讨论每层的细微结构。数据组织 X-Engine的每层都划分成固定大小的Extent，存放每个层次中的数据的一个连续片段（Key Range）。为了快速定位Extent，为每层Extents建立了一套索引（Meta Index），所有这些...
零售电商数据建模
层级 描述 数据引入层 ODS（Operational Data Store）ODS层用于存放 未经过处理的原始数据 至数据仓库系统，其数据表的结构与原始数据所在的数据系统中的表结构一致，是数据仓库的数据准备区。公共维度层 DIM（Dimension）DIM层使用维度...
常见问题（FAQ）
说明 详情请参考Databricks官网文章：常见问题 什么是 Delta Lake?Delta Lake是一个开源存储层，可为数据湖带来可靠性。Delta Lake提供ACID事务，可伸缩的元数据处理，并统一流处理和批数据处理。Delta Lake在您现有的数据湖之上运行，并且...
什么是实时数仓Hologres
本文为您介绍什么是实时数仓Hologres以及Hologres的功能。Hologres是阿里巴巴自主研发的一站式实时数仓引擎（Real-Time Data Warehouse），支持海量数据实时写入、实时更新、实时加工、实时分析，支持标准SQL（兼容PostgreSQL协议和语法，...
常见问题
模型 描述 宽表模型 类Bigtable/HBase模型，可应用于元数据、大数据等多种场景，支持数据版本、生命周期、主键列自增、条件更新、局部事务、原子计数器、过滤器等功能。更多信息，请参见 宽表模型。时序模型 针对时间序列数据的特点进行...
低代码音视频工厂迁移方案
迭代灵活性 较高，应用层组件与后台服务均开源，允许集成方自行二次开发。低，封闭式产品强依赖阿里云排期实现功能迭代。支持区域 仅支持中国内地。支持中国内地和新加坡地区。使用产品 视频直播。Mediabox音视频SDK。ECS（如果需要部署...
地球球体层
贴图类型：贴图类型决定了球体层呈现什么样的样式，类型包括 地形、卫星、粒子、行政区 和 自定义贴图，每种贴图类型下都可以设置贴图的 缩放、凹凸度、贴图色、泛光色 和 高亮色。大气层：大气层的样式。参数 说明 显示 打开开关，显示...
如何将一棵LSM-Tree塞进NVM
我们以X-Engine为基础结合非易失内存的优势与限制，重新设计并实现了存储引擎的主要内存数据结构、事务处理和持久化内存分配器等基础组件，最终实现了不需要记录预写式日志的高性能事务处理，降低了整体系统的写入放大并提高了存储引擎的...
Terraform概述
Terraform是一个开源工具，帮助您在阿里云安全高效地预配和管理云基础结构。什么是Terraform Terraform是一种安全有效地构建、更改和版本控制基础设施的工具（基础架构自动化的编排工具）。它编写了描述云资源拓扑的配置文件中的基础结构，...
TDE透明数据加密
透明数据加密TDE（Transparent Data Encryption）通过在数据库层执行透明的数据加密，阻止可能的攻击者绕过数据库直接从存储层读取敏感信息。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.5.1.1及以上）...
确定需求
基于上述拆解，您还需要进一步思考并设计明细数据层的事实模型（原子指标中成交金额的数据来源）、公共可引用的维度模型（统计粒度的来源，且需要与成交金额所属事实模型有关联关系）和汇总数据层模型（原子指标、业务限定、统计周期的拆解...
常见问题（FAQ）
飘红常见问题 Q：片段长度是什么意思 片段长度表示整个摘要最大长度，飘红只会在片段长度内进行飘红 Q：.是什么意思.是每个片段之间的连接符，例如有一个长度为1000的字段，片段长度为200，有三个分片，那么这三个分片之间就使用.进行连接...
如何定义Manifest
什么是Manifest Manifest的概念...出参结构要精确到使用到的最深层级 由于结构定义不够深，内层的结构会被解析成jsonstring，这种结构对于大模型来说无法进行准确的提取和内容提炼，所以想要达到效果不打折扣，需要将定义做到用到的最深一级。
玄武分析型存储
多种索引类型多路归并查找的过程如下所示：结构化与非结构化融合 玄武存储层索引管理器实现结构化索引与非结构化索引的统一管理，如数值类的BKD索引、字符串类的倒排索引、非结构化的JSON索引及向量索引，还有文本数据的全文索引。对计算层...
MySQL InnoDB空间文件
本文介绍了MySQL InnoDB空间文件的概念及其基本结构。简介 InnoDB除重做日志外均使用统一的结构进行管理，包括系统表空间、用户表空间、撤销日志以及临时表空间。这个结构统称空间文件。inno_space Inno_space是一个可以直接访问InnoDB内部...
向量介绍
每一层图的检索逻辑大致相同（第0层逻辑有些差异），在第k层图遍历收敛到一个节点后，会将其作为第k-1层的入口节点并继续在第k-1层遍历。相较于第k-1层图，第k层图包含的节点更加稀疏，节点之间的距离更长，这使得第k层图游走时的步长更大...
PolarDB并行查询
MySQL的执行结构非常复杂，expression（Item）和query block（SELECT_LEX）的交叉引用，内外层查询的关联（Item_ref）等，都使得这项任务难度大增，但在这个不断填坑不断完善的过程中，团队也对MySQL的优化执行结构有了很深入的理解，还...
逻辑结构说明
Dataphin业务模型的核心概念具有一定的逻辑结构，您可以通过了解其结构，为后期项目规划、建模等提供思路。本文为您介绍Dataphin中核心概念的逻辑结构及简要含义。Dataphin核心概念的逻辑结构如下图所示。由上图可见，Dataphin的架构包括...
Native 框架简介
统一组件库架构 AntUI 的整体架构类似于积木搭建，由下至上构建出 AntUI 统一控件体系：由下而上的构架层级及其描述如下表所示：构架层级 描述 基础层（Foundation）视觉规范单元化的体现，构建 AntUI 体系的基础，主要包含原子资源、原子...
RDS术语
数据结构多样时，可以选择将结构化数据存储在RDS，将非结构化数据存储在MongoDB，满足业务的多样化存储需求。更多信息，请参见 什么是云数据库MongoDB版。慢SQL 执行时间很长的SQL语句。更多信息，请参见 慢日志分析。O OSS Object Storage...
确定需求
您在构建数据仓库之前，首先需要确定构建数据仓库的目标与需求，并进行全面的业务调研。您需要了解真实的业务需求，以及确定数据仓库要解决的问题。业务调研 充分的业务调研和需求分析...需求调研的分析产出通常是记录原子与派生指标的文档。
维度建模
步骤三：数据指标 概览 原子指标和派生指标可以被汇总层或应用层表模型关联。在后续建表模型时，我们可以快速勾选派生指标，构建模型，模型中的字段也可以和指标构建关联关系。例如：原子指标 mbr_cnt 被汇总表模型“dws_ec_mbr_cnt_std”...
GwpInventoryConstitute
名称 类型 描述 示例值 object 温室气体构成 percent double 排放百分比，例如 100.00 是指 100.00%的意思。100.00 resourceType integer 清单类型，可能的清单类型值可以参考 附录。1 unit string 单位 kgCO₂e/kg carbonEmission double ...
确定需求
您在构建数据仓库之前，首先需要确定构建数据仓库的目标与需求，并进行全面的业务调研。您需要了解真实的业务需求，...需求调研的分析产出通常是记录原子与派生指标的文档。icmsDocProps={'productMethod':'created','language':'zh-CN',};
概述
数据分层 您可以结合业务场景、数据场景综合考虑设计数仓的数据分层，DataWorks为您默认创建业界通用的五层数仓分层：数据引入层 ODS（Operational Data Store）明细数据层 DWD（Data Warehouse Detail）汇总数据层 DWS（Data Warehouse ...
数据建模：智能数据建模
适用场景 DataWorks智能建模可助力企业构建自身建模能力，挖掘企业的数据资产价值，例如：海量数据的标准化管理 企业业务越庞大数据结构就越复杂，企业数据量会随着企业业务的快速发展而迅速增长，如何结构化有序地管理和存储数据是每个...
云市场API概览
通用混贴票证识别 通用混贴票证识别，基于对客户实际业务流应用场景中对OCR智能化、语义化、泛在化识别能力的需求，有效整合读光通用高精度文本识别、结构化理解、检测分类及自然语义理解等关键技术，有效实现自动分类、关键有效信息精准...
扫描上报和合并代码模型
同一个未标注的对象被领域层和应用层同时引用，会被扫描为一个结构对象和一个领域对象。已标注为领域对象或结构对象的类，会按照标注类型严格扫描。如果您希望使用以前的扫描规则，您可通过 配置Registry，修改Registry Key为 bizworks....
识别任务说明
结构化数据识别配置 结构化数据识别范围 选择结构化数据（例如RDS、PolarDB）的扫描范围。可选项：全局扫描：扫描您在 作用域 中选择的全部结构化数据资产。指定扫描：选择需要扫描的实例名和实例库名。如需添加多个实例，可单击 添加识别...
明细粒度事实层（DWD）
明细粒度事实层DWD（Data Warehouse Detail）以业务过程驱动建模，基于每个具体的业务过程特点，构建最细粒度的明细层事实表。您可以结合企业的数据使用特点，将明细事实表的某些重要维度属性字段做适当冗余，即宽表化处理。公共汇总粒度...
明细粒度事实层（DWD）
明细粒度事实层DWD（Data Warehouse Detail）以业务过程驱动建模，基于每个具体的业务过程特点，构建最细粒度的明细层事实表。您可以结合企业的数据使用特点，将明细事实表的某些重要维度属性字段做适当冗余，即宽表化处理。公共汇总粒度...
什么是图数据库GDB?
分类 图数据库 关系型数据库 模型 图结构 表结构 存储信息 结构化/半结构化数据库 高度结构化数据库 2度查询 高效 低效 3度查询 高效 低效/不支持 空间占用 高 中 开始使用 您可以通过 入门概览 了解如何购买实例、重置密码以及链接实例和...
如何基于LSM-tree架构实现一写多读
本文主要阐述如何基于LSM-tree结构的存储引擎实现数据库的一写多读能力。LSM-tree数据库引擎 LSM-Tree全称是Log Structured Merge Tree，是一种分层、有序，面向磁盘设计的数据结构，其核心思想是利用磁盘批量的顺序写要比随机写性能高的...
- 产品推荐
- 这些文档可能帮助您