您可以分析数据访问模式并配置 生命周期规则,自动将访问频率较低的数据转换为成本更低的存储类型,或者在到期日之后自动删除数据。为了更有效地管理存储数据,您还可以使用标签对OSS对象进行分类,并在生命周期规则中对这些标签进行过滤。...
性能 如果您的云服务器ECS和对象存储OSS在同一个地域,那么通过云服务器ECS访问对象存储OSS中的数据理论上是最快的。OSS的设计也使其服务端延迟相对于网络延迟来讲可以忽略不计。此外,OSS对于存储量、请求数和用户数的扩展特性,使其可以...
表格存储中的表存储着用户的结构化数据。用户可以在表中查询、插入、修改和删除数据。一个用户可以拥有多个表。数据在表中以行、列、值的形式来组织。上图展示了表格存储中表及其它概念与电子表格的类比:表:类似电子表格中底端的标签,...
存储 Feed流系统中的存储库主要存放具体的用户Feed消息,而Feed消息具备以下特点:数据量大,很容易达到100 TB,甚至PB级别。数据可靠性要求高,不能丢失数据。因此根据以上特点,存储库有几个问题是设计的关键:如何能支持100 TB,甚至PB...
如果您在表格存储中的数据有着独特的结构,希望自定义开发逻辑来处理每一行数据,例如解析特定的JSON字符串,您可以使用用户自定义函数UDF(User Defined Function)来处理表格存储中的数据。MaxCompute Spark 使用Spark计算引擎时,支持...
OSS支持以下功能特性:场景分类 应用场景 场景说明 参考文档 存储空间管理 创建存储空间 在上传文件(Object)到OSS之前,您需要创建一个用于存储文件的存储空间(Bucket)。存储空间具有各种配置属性,包括地域、访问权限、存储类型等。您...
如果您需要频繁访问低频介质中存储的文件,建议您创建数据取回任务,将指定文件或目录中的数据取回至通用型NAS存储空间,避免频繁访问产生读写流量费用。本文介绍如何创建数据取回任务。计费说明 在执行数据取回任务时,NAS会根据目标文件...
适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储,提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。基本概念 在使用 表格存储 前,您需要了解以下基本概念。术语 说明 地域 地域...
通过SQL查询功能,您可以对表格存储中的数据进行复杂的查询和高效的分析,为多数据引擎提供统一的访问接口。背景信息 表格存储(Tablestore)是阿里云自研的多模型结构化数据存储,提供海量结构化数据存储以及快速的查询和分析服务。表格...
教育行业:K12、在线英语等在线教育,将数据存储到OSS,结合OSS传输加速或CDN加速产品,实现海量数据的存储以及内容分发方案。AI/物联网:自动驾驶、物联网等场景。自动驾驶将采集的训练数据通过闪电立方采集与迁移到OSS。物联网家庭视频...
使用表格存储中的数据读写,索引的写入、查询、分析,通道服务等操作均会消耗VCU的计算资源。重要 SQL本身不会有额外的费用,但是使用SQL查询数据过程中涉及到的表扫描、索引查询等操作会消耗VCU的计算资源。数据存储量 说明 当数据量较大...
当受保护的存储空间(Bucket)遭受大流量攻击时,OSS高防会将攻击流量牵引至高防集群进行清洗,并将正常访问流量回源到目标Bucket,确保业务的正常进行。OSS高防提供最高T级DDoS防护能力、百万QPS防护、秒级攻击切换能力,可有效抵御SYN ...
表格存储 面向海量结构化数据提供Serverless表存储服务,适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储,提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。基本概念 在使用 ...
通过为实例中的表配置备份计划并执行,您可以备份 表格存储 中的重要数据到 云备份 中,如果重要数据被误删除或者恶意篡改,您可以将备份数据快速恢复到 表格存储 中。注意事项 当前支持使用数据备份功能的地域有华东1(杭州)、华东2...
如果需要频繁访问低频介质中的数据时,建议您创建数据取回任务,将指定文件或目录中的数据取回至通用型NAS存储空间。执行数据取回任务将读取目标数据,并产生读流量费用。更多信息,请参见 创建数据取回任务。如何创建低频介质存储文件的...
更新分析存储的数据生命周期 当需要清理分析存储中的历史数据或者希望延长数据保存时间时,您可以使用 UpdateTimeseriesAnalyticalStore 接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后,表格存储 会自动异步清理分析...
更新分析存储的数据生命周期 当需要清理分析存储中的历史数据或者希望延长数据保存时间时,您可以使用 UpdateTimeseriesAnalyticalStore 接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后,表格存储 会自动异步清理分析...
分析工具 适用模型 操作 描述 MaxCompute 宽表模型 使用MaxCompute 通过MaxCompute客户端为 表格存储 的数据表创建外部表,即可访问 表格存储 中的数据。Spark 宽表模型 使用Spark计算引擎 使用Spark计算引擎时,支持通过E-MapReduce SQL...
基于Tablestore Sink Connector,您可以将Apache Kafka中的数据批量导入到表格存储(Tablestore)的数据表或者时序表中。背景信息 Kafka是一个分布式消息队列系统,不同的数据系统可以通过Kafka Connect工具将数据流输入Kafka和从Kafka获取...
为保证您资源的数据安全,您可以通过访问控制的RAM Policy、资源目录的Control Policy、表格存储实例的Network ACL、表格存储实例的Instance Policy功能对云资源的访问进行控制,只允许被授权的用户访问表格存储资源。表格存储 支持使用的...
操作 说明 更新分析存储的生命周期 当需要清理分析存储中的历史数据或者希望延长数据保存时间时,您可以更新分析存储的生命周期。在 实例管理 页面的 实例详情 页签,单击 时序表列表 页签。在 时序表列表 页签,单击时序表名。在 基本详情...
HDFS服务中的数据 Impala Impala使用JindoSDK查询OSS-HDFS服务中的数据 Presto Presto使用JindoSDK查询OSS-HDFS服务中的数据 Spark Spark使用JindoSDK查询OSS-HDFS服务中的数据 阿里云生态 EMR 在EMR Hive或Spark中访问OSS-HDFS Flink EMR ...
当需要清理分析存储中的历史数据或者希望延长数据保存时间时,您可以使用UpdateTimeseriesAnalyticalStore接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后,表格存储会自动异步清理分析存储中超过TTL的数据。前提条件 已...
资源包中的存储包不支持叠加购买,但您可以对已购存储包进行 升级。资源包中的传输加速包和回源流量包支持叠加购买,但不支持升级和续费。资源包中的下行流量包支持叠加购买和续费,但不支持升级。请求费用、数据处理费用 和 流量费用 中的...
当需要清理分析存储中的历史数据或者希望延长数据保存时间时,您可以使用UpdateTimeseriesAnalyticalStore接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后,表格存储会自动异步清理分析存储中超过TTL的数据。前提条件 已...
如果您长时间(超过30天)未使用OSS中存储的Object,但是仍然希望保留Object,建议您通过生命周期规则将Object从标准存储类型转换为低频访问、归档存储、冷归档存储或者深度冷归档存储类型,可以节省约50%到80%的费用。通过生命周期转换...
使用Flink访问表格存储中的表前,您需要开通实时计算Flink服务并创建Flink全托管实例以及开通表格存储Tablestore服务并创建Tablestore实例。背景信息 阿里云实时计算Flink版是一套基于Apache Flink构建的⼀站式实时大数据分析平台,提供...
✓ 仅支持与中国内地各地域的Bucket之间配置跨区域复制 同区域复制 同区域复制(Same-Region Replication)是指将源存储空间(Bucket)中的文件(Object)的创建、更新和删除等操作自动、异步(近实时)地复制到相同地域下的目标Bucket。...
表格存储 中的全量数据以及增量数据可以通过DataWorks数据集成同步到 对象存储 中备份和使用。实现原理 DataWorks数据集成的离线同步功能将不同数据源的同步抽象为从来源数据源读取数据的Reader插件以及向目标数据源写入数据的Writer插件,...
表格存储 中的NetWork ACL是基于资源的网络访问控制功能,可以为单个实例配置网络访问方式。表格存储 中的Instance Policy是基于资源的授权策略,可以为单个实例配置访问权限。授权说明 不同权限控制方式的适用对应以及能实现的授权场景...
当您完成了创建存储空间(Bucket)、上传和下载文件(Object)等基本操作后,您可以结合自身的业务场景选用OSS提供的一系列常用的高阶功能。下表汇总了OSS的常用高阶功能:功能列表 说明 开启请求者付费模式 请求者付费模式是指由请求者...
表格存储高并发的写入性能以及低廉的存储成本非常适合物联网、日志、监控数据的存储。将数据写入到表格存储时,您可以通过函数计算对新增的数据做简单的清洗,将清洗后的数据写回到表格存储的另一种数据表中。同时,您也可以实时访问表格...
不适用 同区域复制 同区域复制(Same-Region Replication)是指将源存储空间(Bucket)中的文件(Object)的创建、更新和删除等操作自动、异步(近实时)地复制到相同地域下的目标Bucket。不适用 使用数据复制时间控制(RTC)OSS数据复制...
如果希望分析存储中的数据永不过期,可以设置为-1。您可以通过UpdateTimeseriesAnalyticalStore接口修改。syncOption 分析存储同步选项。取值范围如下:SYNC_TYPE_FULL表示同步全部数据到分析存储。SYNC_TYPE_INCR表示同步增量数据到分析...
除了授权方式外,您还可以在 MaxCompute 中使用 AccessKey 访问表格存储的数据。准备工作 获取表格存储资源所属账号的 AccessKeyId 和 AccessKeySecret,如果该 AK 是资源所属账号的子账号,那么该子账号至少需要对表格存储相关的资源具有...
如果希望分析存储中的数据永不过期,可以设置为-1。您可以通过UpdateTimeseriesAnalyticalStore接口修改。syncOption 分析存储同步选项。取值范围如下:SYNC_TYPE_FULL表示同步全部数据到分析存储。SYNC_TYPE_INCR表示同步增量数据到分析...
这种设计下,五维中的前三维都可以通过主键列的值来定位,即对于前三维的每一种情况,都对应表格存储中的一行。由于前三维分别代表变量、时间和高度,一般不会很多,每个维度在几个到几十个的级别,可以通过一些并行查询的方法来加速查询...
无地域属性Bucket中的数据会被存储于中国内地的某个地域,但您不感知具体地域信息,只能通过该Bucket的外网Endpoint来访问。重要 无地域属性Bucket的Region固定为 oss-rg-china-mainland,仅支持通过外网访问,外网Endpoint固定为 oss-rg-...
如果您在表格存储中的数据有着独特的结构,希望自定义开发逻辑来处理每一行数据,例如解析特定的JSON字符串,您可以使用用户自定义函数UDF(User Defined Function)来处理表格存储中的数据。操作步骤 在IntelliJ中安装MaxCompute-Java/...
当日常业务中有非主键列查询、多列组合查询、模糊查询等多维查询需求以及求最值、统计行数、数据分组等数据分析需求时,您可以将这些属性作为多元索引中的字段并使用多元索引查询与分析数据。背景信息 多元索引可以解决大数据中复杂的查询...