迁移工具
将MySQL数据同步迁移到表格存储 将HBase数据同步到表格存储 将MaxCompute数据同步到表格存储 将表格存储数据同步到MaxCompute 将表格存储数据同步迁移到OSS 将表格存储数据表中数据同步到另一个数据表 将表格存储时序表中数据同步到另一个...
配置冷存储
执行 RELOAD 操作，避免影响冷存储数据转移耗时。search-cli reload_collection-c collection_name 执行以下语句设置目标表的冷存储属性。search-cli modify_collection-c collection_name-s COLD 执行以下语句将目标表的数据迁移至冷存储...
数据可视化工具
DataV可用于展示表格存储数据表或者二级索引表中的数据，一般用于构建复杂的大数据处理分析展现的企业应用系统。对接DataV Grafana Grafana是一款开源的可视化和分析平台，支持Prometheus、Graphite、OpenTSDB、InfluxDB、Elasticsearch、...
功能特性
宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、宽行、多版本数据以及生命周期管理特点，支持主键列自增、局部事务、原子计数器、过滤器、条件更新等功能。主键列自增 条件更新 局部事务 原子计数器 ...
数据存储量
表格存储数据表基于LSM架构实现，数据会采取追加写入的方式写入内存，当数据满足一定条件后会转存形成一个小的数据文件。对于单行数据的多次更新与删除操作可能会分散到多个小文件中，直接计算所有文件大小会造成冗余计量。而系统会定期...
时序数据生命周期
数据生命周期 时序模型中的数据包括时间线元数据和时序表数据，分别由时间线元数据表和时间线数据表存储。表格存储分别提供了时间线元数据生命周期和时序表数据生命周期用于管理相应数据。时序表数据生命周期 时序表数据生命周期是时间线...
宽表模型介绍
宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、宽行、多版本数据以及生命周期管理特点，支持主键列自增、局部事务、原子计数器、过滤器、条件更新等功能。模型介绍 表格存储 宽表模型是类Bigtable/...
实例
具体操作，请分别参见 将表格存储数据表中数据同步到另一个数据表 和 将表格存储时序表中数据同步到另一个时序表。不论当前实例规格，使用多元索引时均会产生高性能存储量、预留读吞吐量与按量读吞吐等。更多信息，请参见 多元索引计量计费...
表设计规范
分区表的分区列级数不能超过6级，即底层存储数据的目录层数不能超过6层。因此应为分区表设置合适的生命周期。当部分数据的生命周期与其它数据不同时，您可以通过细粒度分区实现对部分数据的管理。分区字段定义依据 按优先级高低排序如下：...
管理问题数据
背景信息 问题数据表 数据质量支持在部分规则校验不通过的情况下，系统自动创建 问题数据表 存储质量规则校验过程中发现的问题数据。问题数据表名生成规则：{监控数据表原表名}_dirtydata_dw_system_dqc。问题数据表所属空间：根据当前表所...
数据备份概述
为了防止由于误删、恶意篡改等导致重要数据不可用，您可以使用 表格存储 数据备份功能备份实例中宽表数据，并在数据丢失或受损时及时恢复。背景信息 云备份（Cloud Backup）作为阿里云统一灾备平台，是一种简单易用、敏捷高效、安全可靠的...
通过控制台投递数据到OSS
通过表格存储控制台创建投递任务，将表格存储数据表中的数据投递到OSS Bucket中存储。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket，详情请参见 开通OSS服务。说明 数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...
创建投递任务
通过创建投递任务，您可以将表格存储数据表中的数据投递到OSS Bucket中存储。注意 请确保已安装支持数据湖投递功能的表格存储Java SDK。关于表格存储Java SDK版本的更多信息，请参见 Java SDK历史迭代版本。前提条件 已开通OSS服务且在表格...
IoT数据源
类型分类 物联网平台存储表数据类型 数据集成配置类型 整数类 BIGINT BIGINT 布尔类 BOOLEAN BOOLEAN 日期时间类 TIMESTAMP BIGINT 浮点类 DOUBLE DOUBLE 字符串类 VARCHAR STRING 支持的存储表 数据表 表标识符 描述 产品表 system.iotx_...
概述
数据冷存的几种模式 数据冷存是指将数据表/索引/物化视图转存入OSS，转存后不再占用或者极少量占用数据库云盘存储空间，从而大大降低数据库的存储成本。数据冷存后，所有的增删改查SQL都透明，无需做任何修改。PolarDB支持的数据冷存模式...
库表结构优化
冷热数据优化 分析数据表的使用情况，对长期未使用的数据表，建议将其迁移至冷盘存储，以减低数据表存储成本。此类型的优化建议针对数据表级别。迁移数据表到冷盘存储的具体操作，请参见 数据存储冷热分离。说明 数据表迁移至冷盘后，该...
概述
数据冷存的几种模式 数据冷存是指将数据表/索引/物化视图转存入OSS，转存后不再占用或者极少量占用数据库云盘存储空间，从而大大降低数据库的存储成本。数据冷存后，所有的增删改查SQL都透明，无需做任何修改。PolarDB支持的数据冷存模式...
2023年
创建实例 Master资源管理 支持数据存储冷热分层 云原生数据仓库AnalyticDB PostgreSQL版 支持冷热分层存储，可以将数据表存储到OSS中，以降低存储成本。数据存储冷热分层 2023年5月 功能 功能描述 相关文档 向量引擎优化 AnalyticDB ...
实例选型和集群规划
行存储与列存储 云原生数据仓库AnalyticDB PostgreSQL版在表数据存储格式上支持行存储和列存储，二者在不同使用场景下各有优劣势，直接关系到实例的性能和存储空间。用户在创建表时，支持指定数据存储格式，即支持按行组织存储，也支持按列...
X-Engine引擎常见问题
PolarDB（X-Engine）采用分布式存储，数据库的高可用不再需要依赖Binlog复制，间接提高了写入性能。PolarDB MySQL版 5.6/5.7版本是否支持X-Engine引擎？不支持。X-Engine支持事务吗？支持事务。X-Engine支持OnlineDDL吗？支持，执行DDL变更...
数仓规划概述
下图以默认的五层数据分层为例，数据分层规划完成后，后续的表数据存储可根据规划分别存储至不同的数据分层中。贴源层：用于数据库、日志、消息等基础源数据的引入。源数据经过一系列ETL操作进入贴源层，该层级只能挂载贴源表。公共层：...
时序分析存储概述
更新分析存储数据生命周期 修改分析存储数据生命周期TTL，优化存储费用。SQL查询分析 分析存储支持通过SQL进行查询，SQL中支持通过使用不同条件进行聚合分析操作。核心优势 海量数据的实时分析 对于时序的热数据采用 表格存储 行列混合的宽...
数据集成服务
表格存储数据跨实例或者跨账号迁移同步 通过在DataWorks中配置表格存储相关的Reader和Writer插件，即可以完成表格存储数据表或者时序表的数据复制，如下图所示。表格存储相关的插件说明请参见下表。插件 说明 OTSReader 用于读取表格存储表...
如何查看表的数据存储量
介绍如何查看表的数据存储量。操作步骤 通过控制台在数据表的 基本详情 页签，可以查看表大小，即表的数据存储量。通过控制台在数据表的 监控指标 页签，选择 指标分组 为 表大小，可以查看表大小，即表的数据存储量。
数据表-数据概况
功能说明 在数据表详情的数据概况标签页，基于对元数据及存储数据的统计，为您提供了数据表更加详细的指标信息，比如表存储大小、表文件总数、DDL最后更新时间、数据最后更新时间、访问次数、分区存储大小，分区文件数，分区最后更新时间等...
前言
创建数据表用于存储数据。更多信息，请参见 表操作。读写表中数据。更多信息，请参见 基础数据操作 和 增量数据操作。使用索引加速数据查询。更多信息，请参见 多元索引 和 二级索引。使用SQL查询数据。更多信息，请参见 SQL查询。请根据...
Hash Clustering
以下是一个简单的实验，使用TPC-H数据集中100GB的 lineitem 表，包含了 int、double、string 等多种数据类型，在数据和压缩方式等完全一样的情况下，对比使用Hash Clustering和未使用Hash Clustering的表存储大小，使用Hash Clustering的表...
数据湖投递概述
表格存储 数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储，以满足更低成本的历史数据存储，以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求：冷热数据分层 数据湖投递结合 表格存储 的 ...
前言
创建数据表用于存储数据。更多信息，请参见 表。读写表中数据。更多信息，请参见 基础数据操作。使用索引加速数据查询。更多信息，请参见 多元索引 和 二级索引。使用SQL查询数据。更多信息，请参见 SQL查询。SDK下载 通过GitHub下载，具体...
时序模型
删除时序表 当不再需要使用时序表存储时序数据时，您可以使用 DeleteTimeseriesTable 接口删除一张时序表。重要 时序表删除后不支持恢复，请谨慎操作。删除时序表时，系统会自动删除时序表下的分析存储。分析存储操作 为了低成本存储时序...
时序模型
删除时序表 当不再需要使用时序表存储时序数据时，您可以使用 DeleteTimeseriesTable 接口删除一张时序表。重要 时序表删除后不支持恢复，请谨慎操作。删除时序表时，系统会自动删除时序表下的分析存储。分析存储操作 为了低成本存储时序...
什么是表格存储
表格存储（Tablestore）面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、...
表操作
使用表格存储时，您需要创建数据表用于数据存储。一般情况下，创建不带二级索引的数据表即可。您也可以根据实际场景创建所需数据表。如果要使用二级索引加快数据查询效率，请创建带二级索引的数据表。更多信息，请参见 创建数据表。二级...
功能概述
宽表模型 功能特性 描述 相关文档 表操作 支持列出实例中的全部数据表、创建一张数据表、查询数据表的配置信息、更新数据表的配置信息以及删除一张数据表。表操作 基础数据操作 表格存储 提供了PutRow、GetRow、UpdateRow和DeleteRow的单行...
元数据管理
元数据管理是构建数据湖重要一环，通过有效集中式的元数据管理，可以提升数据资产价值。您可以使用该功能管理元数据...说明 在DLF页面删除数据表后，并不会删除OSS存储的数据，如需删除数据请从E-MapReduce/MaxCompute侧执行Drop Table操作。
使用流程
3 创建数据表 创建数据表用于存储业务相关数据。创建数据表时，您可以根据业务需求同时配置如下功能。如果业务中需要使用不同属性作为查询条件来执行数据查询，您可以创建二级索引加速数据查询。如果要落盘加密表中数据，您可以配置数据...
创建逻辑模型：明细表
存储策略 明细表存储数据的策略，可以选择 每日增量、每日全量 等多种策略。表名规则 选择已配置的检查器。用于检测表名称是否符合该检查器制定的表命名规则。配置检查器，详情请参见 配置及使用数仓分层检查器。表名 表的内部名称。若配置...
二级索引简介
使用本地二级索引时，表格存储以同步方式将数据表中被索引的列和主键列的数据自动同步到索引表中，当数据写入数据表后，即可从索引表中查询到数据。覆盖索引 支持索引表中带有属性列。在创建数据表时预先定义一些列（称为预定义列）后，您...
对接DataV
通过DataV控制台添加表格存储数据源后，您可以使用DataV可视化展现表格存储的数据。前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用。首次使用DataV时...
数据膨胀诊断
AnalyticDB PostgreSQL版 数据库使用PostgreSQL多版本并发控制（MVCC）来管理并发事务，底层表的储存数据被划分成固定大小的Page，默认Page大小为32 KB。每个Page包含Header（数据头）、Item pointer array（指向内部数据的指针数组）、...
- 产品推荐
- 这些文档可能帮助您