物联网存储介绍
统一数据存储平台 为物联网场景中的设备元数据、设备消息数据、设备时序数据提供统一的数据存储平台。其中设备元数据使用宽表模型存储，设备消息数据使用消息模型存储，设备时序数据使用时序模型存储。Serverless架构 采用存储计算分离架构...
数据集成服务
迁移方案 说明 同步表格存储数据到MaxCompute 您可以使用MaxCompute备份表格存储数据或者迁移表格存储数据到MaxCompute中使用。迁移过程中会使用到表格存储的Reader脚本配置和MaxCompute的Writer脚本配置。具体数据源配置如下：源数据源：...
迁移工具
使用DataWorks/DataX、表格存储的通道服务等迁移工具，在不影响业务的情况下您可以实现表格存储数据的全量迁移、增量迁移或者实时同步。本文介绍如何选择迁移工具。迁移工具选择 迁移数据时，请根据实际业务选择合适的迁移工具。表格存储...
数据湖投递概述
表格存储 数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储，以满足更低成本的历史数据存储，以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求：冷热数据分层 数据湖投递结合 表格存储 的 ...
数据转发到表格存储（Tablestore）时序模型
设备时序数据（例如传感器采集数据、设备监控数据和设备轨迹数据）具有极少更新、数据规模大等特点，需要使用时序模型存储，并且支持高并发写入、低成本海量数据存储以及灵活的查询分析能力。表格存储（Tablestore）的时序引擎针对时间序列...
概述
企业和组织一般将数据存储视为辅助服务，在数据上云后不会优化存储，也不会清理未使用的存储，从而使这些服务以巨额成本长期运行。根据 RightScale的博客文章，大约有7％的云上支出浪费在未使用的存储卷和旧快照（存储卷的副本）上。阿里云...
离线数据存储概述
您可以使用物联网平台提供的离线数据存储功能，查看您设备基本情况和上报的设备物模型数据。离线数据包括平台系统表、时序表、快照表和自定义存储表。本文介绍不同类型存储表的基本功能和应用场景。前提条件 已备份数据，具体操作，请参见 ...
如何查看表的数据存储量
介绍如何查看表的数据存储量。操作步骤 通过控制台在数据表的 基本详情 页签，可以查看表大小，即表的数据存储量。通过控制台在数据表的 监控指标 页签，选择 指标分组 为 表大小，可以查看表大小，即表的数据存储量。
UpdateTimeseriesAnalyticalStore
调用...响应消息结构 message UpdateTimeseriesAnalyticalStoreResponse { } 使用SDK 您可以使用如下语言的SDK更新时序分析存储数据生命周期。Java SDK：更新分析存储的数据生命周期 Go SDK：更新分析存储的数据生命周期
产品架构
按照传统方案，为了满足多种类型数据的存储、查询和分析需求，在设计IT架构时，需要针对不同种类的数据，采用不同的存储分析技术，如下图：这种技术方案，是一种典型的技术碎片化的处理方案。针对不同的数据，使用不同的数据库来处理。有...
更新分析存储的数据生命周期
timeToLive 分析存储数据存活时间，单位为秒。取值范围为-1（数据永不过期）或者大于等于2592000秒（即30天）的int32正整数。如果希望分析存储中的数据永不过期，可以设置为-1。示例 以下示例用于更新test_timeseries_table时序表下名为...
更新分析存储的数据生命周期
timeToLive 分析存储数据存活时间，单位为秒。取值范围为-1（数据永不过期）或者大于等于2592000秒（即30天）的int32正整数。如果希望分析存储中的数据永不过期，可以设置为-1。示例 以下示例用于更新test_timeseries_table时序表下名为...
冷数据分层存储计费规则
本文介绍开启冷数据分层存储后，在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后，PolarDB PostgreSQL版 支持将集群的冷数据转存至低成本的OSS上进行存储，以降低数据存储成本。说明 更多关于冷数据分层存储的详细介绍，请...
数据存储
根据采集到的不同数据类型，AnalyticDB采用不同的后台存储系统来进行监控数据的存储。时序数据存储 时序数据库对时序数据的写入、聚合以及检索都做了特定优化，AnalyticDB采集到的时序数据主要存在时序数据库中。目前每个AnalyticDB实例有...
冷数据分层存储计费规则
本文介绍开启冷数据分层存储后，在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后，PolarDB PostgreSQL版（兼容Oracle）支持将集群的冷数据转存至低成本的OSS上进行存储，以降低数据存储成本。说明 更多关于冷数据分层存储...
冷数据分层存储计费规则
本文介绍开启冷数据分层存储后，在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后，PolarDB PostgreSQL版（兼容Oracle）支持将集群的冷数据转存至低成本的OSS上进行存储，以降低数据存储成本。说明 更多关于冷数据分层存储...
创建分析存储
timeToLive 分析存储数据存活时间，单位为秒。取值范围为-1（数据永不过期）或者大于等于2592000秒（即30天）的int32正整数。如果希望分析存储中的数据永不过期，可以设置为-1。您可以通过UpdateTimeseriesAnalyticalStore接口修改。...
对象命名
与传统文件系统中的层级结构不同，OSS内部使用扁平结构存储数据。即所有数据均以对象（Object）的形式保存在存储空间（Bucket）中。对象（Object）是OSS存储数据的基本单元，也被称为OSS的文件。OSS通过键名（Key）唯一标识存储的Object。...
创建分析存储
timeToLive 分析存储数据存活时间，单位为秒。取值范围为-1（数据永不过期）或者大于等于2592000秒（即30天）的int32正整数。如果希望分析存储中的数据永不过期，可以设置为-1。您可以通过UpdateTimeseriesAnalyticalStore接口修改。...
备份存储空间
通过跨区域复制功能进行备份 跨区域复制是跨不同OSS数据中心（地域）的存储空间（Bucket）自动、异步（近实时）复制文件，它会将文件的创建、更新和删除等操作从源存储空间复制到不同区域的目标存储空间。配置方法请参见 设置跨区域复制。...
配置数据库审计实例
在 存储信息 区域单击 配置 后，您可以根据实际需要执行下述操作：清空存储空间 警告 清空存储空间后，您将无法查询已被清理的存储数据，请谨慎操作。该操作可以释放已使用的存储空间。单击 已用存储 右侧的 清空，会清空数据库审计实例...
常见问题
DAS企业版 V3超出最近7天的数据，采用的存储方式是冷数据存储，相较DAS企业版 V1数据的存储方式，数据没有全文索引等信息，并且底层采用snappy对数据进行高效压缩，所以数据量最多可降低为旧版的30%，从而极大降低了存储成本。如何查看企业...
冷热数据分层存储
为了降低数据存储成本、提高查询性能和系统资源利用率。云数据库ClickHouse 提供了冷热数据分层存储的功能。您可以根据查询频率将数据存储在不同类型的磁盘中。本文介绍如何开启冷热数据分层存储功能和设置分层存储策略。前提条件 云数据库...
内置存储与用户OSS
DBS内置存储说明 DBS的存储空间无需手动配置，根据存储数据量自动伸缩，您只需为实际使用的数据量按量付费。当您的存储数据量较大时，推荐您使用DBS存储包，相比按量付费，预付费购买存储包有折扣，购买的容量越大，折扣力度就越大。详情请...
使用前须知
简单上传 修改Object存储类型 数据无法访问、计费规则变化 对开通了OSS-HDFS服务的Bucket，建议不要修改OSS-HDFS的数据存储目录.dlsdata/下任意Object的存储类型。如果您将.dlsdata/下任意Object的存储类型修改为低频类型时，通过OSS-HDFS...
成本
对象存储（OSS）是阿里云推出的存储服务，具备数据量大、成本低、安全性高、可靠性高的特点，能够满足多种场景的存储需求，存储成本低至 0.12元/GB/月。AnalyticDB PostgreSQL版 支持通过外表方式对OSS存储服务进行访问，支持对OSS的数据...
对接DataV
通过DataV控制台添加表格存储数据源后，您可以使用DataV可视化展现表格存储的数据。前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用。首次使用DataV时...
冷数据存储计费规则（可选）
本文介绍了开启冷数据归档功能后，在冷数据存储方面的计费规则。当 开启冷数据归档 后，PolarDB 企业版支持将集群的冷数据转存至低成本的OSS上进行存储，以降低数据存储成本。说明 更多关于冷数据归档的详细介绍，请参见 冷数据归档概述。...
Serverless存储层
实时数据存储在热存储（SSD）上，保证超低延时的写入和查询性能，可提供行级数据实时性。全量数据以微分区（Micro Partitions）的形式存储，大幅度优化传统数仓中出现的IO放大和写放大的问题，提供高吞吐的读写能力。同时，利用OSS和PANGU...
冷热分层存储
为避免配置错误导致冷热分层无法正常工作，OSS会自动创建同时包含以下三种策略的生命周期规则：指定OSS-HDFS的数据存储目录.dlsdata/下携带Key为 transition-storage-class、Value为 IA 标签的数据在1天后转为低频访问存储。指定OSS-HDFS的...
设置数据冷热存储策略
本文介绍通过开源HDFS客户端设置冷热数据存储策略的方法。前提条件 已开通冷存储功能。具体操作，请参见 开通冷存储。操作步骤 通过开源HDFS客户端访问文件引擎，具体操作，请参见 通过开源HDFS客户端连接并使用文件引擎。通过以下命令 ...
数据服务系统配置
API缓存数据存储位置 在 API缓存数据存储位置 区域，单击 修改 按钮，支持指定API缓存数据的存储位置。Dataphin系统的redis：将缓存数据存储到系统公共的Redis中，将与其他模块共享存储空间，适用于缓存数据量较小的场景。应用内存：缓存...
准备工作
本文介绍环境准备和数据准备工作。环境准备 已创建阿里云E-MapReduce的Hadoop集群。具体操作，请参见 创建集群。已下载E-MapReduce的最新 SDK，SDK包的名称格式为emr-datasources_shaded_*.jar，...用于添加表格存储数据源在大屏上显示数据。
多元索引计量计费
使用多元索引时，索引数据会产生额外的数据存储量，索引查询也会消耗读吞吐量。本文介绍了多元索引的计费项、计费公式、计费示例以及常见问题。注意事项 索引单独计量计费，和数据表无关。多元索引的各计费项的价格和高性能实例费用一致。...
方案背景
大数据计算场景：推荐系统，订单类业务等 实时数据计算场景：监控系统，电商数字大屏等 样例场景 某电商公司为了完成电商运营数据的分析和展示，使用表格存储统一存储电商数据，通过Spark的流批处理离线聚合或实时统计电商数据，最终在...
如何保留相同主键的多个版本数据
更多信息，请参见 数据存储量。设置数据多版本 数据多版本支持在创建数据表时指定或者是在创建数据表后更新。方式一：在表格存储控制台设置数据多版本 在创建数据表时指定最大版本数。具体操作，请参见 创建数据表。在创建数据表后更新最大...
备份集最小保留策略
方法如下：通过控制台：配置备份计划、修改备份生命周期 通过API接口：CreateAndStartBackupPlan-创建并配置启动备份计划、ModifyStorageStrategy-修改存储数据的生命周期 配置备份计划时，如果将备份数据存储至 用户OSS，将不会产生DBS...
使用函数计算清洗数据
表格存储高并发的写入性能以及低廉的存储成本非常适合物联网、日志、监控数据的存储。将数据写入到表格存储时，您可以通过函数计算对新增的数据做简单的清洗，将清洗后的数据写回到表格存储的另一种数据表中。同时，您也可以实时访问表格...
设备数据存储和计算实践
物联网平台提供数据存储服务，包括数据分层存储，并且在数据存储上提供数据导出、变更通知订阅、及连接⼤数据产品的组件等必要的存储相关服务。同时支持搭配计算组件（实时数据处理、交互式分析和离线计算），供您快捷地处理物联网平台设备...
数据存储冷热分离
AnalyticDB MySQL版 弹性模式集群版（新版）（3.1.3.3及以上版本）支持表或分区级别的数据存储冷热分离策略。前提条件 AnalyticDB MySQL版 集群需要同时满足以下条件：集群系列需为 弹性模式集群版（新版）。集群内核版本需为3.1.3.3或以上...
- 产品推荐
- 这些文档可能帮助您