方案背景
本文介绍了表格存储结合实时计算Flink实现大数据分析的样例场景、架构设计等。背景信息 云数据库RDS MySQL基于阿里巴巴的MySQL源码分支，经过双十一高并发、大数据量的考验，拥有优良的性能。RDS MySQL支持实例管理、账号管理、数据库管理...
方案背景
介绍表格存储结合Spark流批处理实现一体化存储和计算的背景、适用场景、样例场景和架构设计。背景 电子商务模式是指在网络环境和大数据环境下基于一定技术基础的商务运作方式和盈利模式。在电商运营中数据的分析和可视化是最重要的部分之一...
宽表模型介绍
使用宽表模型可以实现元数据、大数据等多种场景的解决方案，例如 搭建海量智能元数据管理系统、亿量级订单管理方案、基于多元索引搭建亿量级店铺搜索系统、表格存储结合Spark流批处理实现一体化存储和计算、表格存储结合实时计算Flink进行...
通过PrestoDB使用Tablestore
PrestoDB是基于MPP架构的开源大数据分布式SQL查询引擎，支持对接MySQL、Elasticsearch、...结合计算引擎和表格存储您可以实现 表格存储结合Spark流批处理实现一体化存储和计算、表格存储结合实时计算Flink进行大数据分析 等解决方案。
通过控制台使用宽表模型
表格存储 提供了控制台、命令行工具（Tablestore CLI）和Tablestore SDK三种访问方式。通过控制台使用宽表模型（WideColumn）时，您需要开通表格存储服务，然后使用控制台进行创建实例、创建数据表、读写表中数据以及使用SQL查询数据的操作...
应用场景
本文结合 表格存储 的典型应用架构介绍了不同应用架构下的应用场景。互联网应用 目前互联网已在日常生活中广泛应用，人们可以在互联网上购物、社交、游戏等。表格存储 互联网应用架构能够满足互联网中大部分应用的业务需求，典型应用场景...
文件系统存储类型
存储类型 通用型NAS文件系统提供了为实现低成本存储而设计的不同存储类型，分别为标准存储、低频存储和归档存储。标准存储：提供高可靠、高可用、高性能的文件存储服务，适用于存储频繁访问的热数据。在创建文件系统后，文件系统数据首先...
什么是文件存储NAS
安全 基于RAM实现的资源访问控制，基于VPC实现的网络访问隔离，结合文件存储NAS的传输加密与存储加密特性，保障数据不被窃取或篡改。高可靠性 NAS采用单可用区（AZ）数据存储机制，将用户的数据在后端进行多副本存储，每份数据都会存储在同...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。列举存储空间 以下代码用于列举当前账号所有地域下的存储空间。require '...
如何使用OSS更省钱？
使用OSS时，您可以根据业务数据的变化合理规划存储类型、利用预付费与后付费策略等方式有效降低使用成本。注意事项 以下案例单价来自2024年04月12日阿里云官网公布的OSS详细价格信息。因统计的价格日期不同，各个计费项的单价可能存在差异...
基本概念
术语 描述 文件系统实例 一个拥有全局命名空间，可用来存储数据的文件系统。您可以通过挂载点访问文件系统实例中的数据。挂载点 挂载点是文件系统实例在专有网络或经典网络内的一个访问目标地址。每个挂载点都对应一个域名，您需要修改 ...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域...
CreateDataFlow-创建数据流动
创建一个CPFS文件系统与源端存储的数据流动。接口说明 基础操作 文件存储 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持数据流动。文件存储 CPFS、CPFS 智算版状态为运行中，才能创建数据流动。一个文件存储 CPFS 或者 CPFS 智算...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。列举所有存储空间 以下代码用于列举当前账号所有地域下的存储空间。const OSS...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。列举所有存储空间 以下代码用于列举当前账号所有地域下的存储空间。...
使用教程
本文主要为您介绍如何使用Hive或者HadoopMR访问表格存储中的表。数据准备 在表格存储中准备一张数据表pet，name是唯一的一列主键，数据示例请参见下表。说明 表中空白部分无需写入，因为表格存储是schema-free的存储结构，没有值也无需写入...
卸载并释放E-MapReduce HDFS使用的云盘
背景信息 当E-MapReduce已经成功运行在阿里云 文件存储 HDFS 版 上时，ECS挂载的云盘只用来存储运算中的临时Shuffle文件，可以选择卸载原来用于构建E-MapReduce HDFS服务的云盘，降低集群的拥有成本。重要 从数据安全性考虑，数据迁移后...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下的存储空间。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域...
事件告警
共享使用的缓存盘由数据空间和元数据空间组成，默认20%的缓存盘空间会用来存储元数据。当可用元数据空间不足3 GB或者不足所有元数据空间的20%时会触发此告警。处理方式 建议扩展共享对应的缓存盘来扩大元数据空间，避免因元数据空间不足而...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。注意事项 使用示例前，需要初始化ossClient用于列举存储空间，初始化方法如下...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域...
什么是OSS-HDFS服务
OSS-HDFS服务（JindoFS服务）是一个云原生数据湖存储功能。基于统一的元数据管理能力，完全兼容HDFS文件系统接口，满足大数据和AI等领域的数据湖计算场景。注意事项 警告 当您为某个Bucket开通OSS-HDFS服务后，通过该服务写入的数据将保留...
概述
大数据分析 如果您的业务采用MySQL数据库，随着业务的发展，大数据分析场景逐渐增多，而MySQL数据库进行大数据分析需要结合流式组件、存储系统、计算组件等工具，操作复杂且难度大，您可以选择将MySQL数据库迁移到表格存储中实现大数据分析...
CPFS并行文件存储
产品架构 CPFS并行文件存储 是针对高性能和超大规模存储场景推出的文件存储产品，可结合云上、云下多级存储池，拥有全新的文件存储架构。该产品单集群最大可扩展至16384个节点，提供高性能、高可扩展性、低时延的分布式文件存储服务。可...
功能支持情况
支持本地冗余存储，不支持同城冗余存储 OSS高防 OSS高防是OSS结合DDoS高防推出的DDoS攻击代理防护服务。当受保护的Bucket遭受大流量攻击时，OSS高防会将攻击流量牵引至高防集群进行清洗，并将正常访问流量回源到目标Bucket，确保业务能正常...
快速玩转Tablestore入门与实战
Tablestore结合Spark的流批一体SQL实战 Tablestore+Blink实战：交易数据的实时统计 百亿级全网舆情分析系统存储设计 海量监控日志基于EMR Spark Streaming SQL进行实时聚合 物联网 表格存储 单表提供PB级数据存储规模，无需分库分表，同时...
数据湖投递概述
应用场景 利用数据湖投递可以实现如下场景需求：冷热数据分层 数据湖投递结合 表格存储 的 数据生命周期 功能，可以快速实现OSS低成本存储全量数据，表格存储 提供热数据的低延迟查询和分析的需求。全量数据备份 数据湖投递可以自动将 表格...
概述
对象存储OSS 对象存储OSS（Object Storage Service）是一款海量、安全、低成本、高可靠的云存储服务，其容量和处理能力弹性扩展，提供多种存储类型供选择，覆盖从热到冷的各种数据存储场景，帮助您全面优化存储成本。块存储 块存储是阿里云...
表格存储和传统关系型数据库（例如MySQL、SQL Server...
表格存储是阿里云自研的多模型结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务，与传统关系型数据库（RDBMS，例如MySQL、SQL Server）在数据模型和技术实现上都有较大的区别。表格存储和传统关系型数据库的主要区别如下：...
表格存储和HBase的区别
Table management 表格存储自动执行Table相关的操作，用户无需关注，因此不支持以下接口：compact(TableName tableName)compact(TableName tableName,byte[]columnFamily)flush(TableName tableName)getCompactionState(TableName ...
时序分析存储概述
高数据压缩率存储 列存储能更好地利用数据重复性，结合RLE、DICTIONARY、DELTA、BIT-PACKING等方法进行压缩编码，将数据进行压缩，存储空间利用率高，从而节省存储成本。灵活分层的TTL设置 在同一张时序表上，时序数据存储和时序分析存储...
使用场景
适配传统应用 有很多用户在云上的业务是新老业务的结合，老业务是从数据中心迁移过来的使用的是标准的存储协议，例如：NFS，SMB，iSCSI。新的应用往往采用比较新的技术，支持对象访问的协议。如何沟通两种业务之间的数据是一个比较麻烦的...
0042-00000310
问题描述 UploadPartCopy请求中 x-oss-copy-source 参数指定的拷贝源文件为归档存储（Archive）类型。问题原因 您发起了UploadPartCopy请求来从一个已存在的Object中拷贝数据来上传一个Part，x-oss-copy-source 参数用来指定拷贝源。该参数...
最佳实践
容器与云原生 如何利用云存储网关作为Windows Docker存储访问OSS 在Linux Docker容器中挂载使用云存储网关 Windows应用 利用云存储网关搭建Windows文件共享服务器 利用云存储网关的SMB共享搭建windows FTP服务器访问对象存储OSS 如何基于云...
云存储网关
云存储网关CSG（Cloud Storage Gateway）是一款可以部署在用户本地数据中心和阿里云上的网关产品。它以阿里云对象存储OSS为后端存储，为云上和云下应用提供业界标准的文件服务（NFS和SMB）和块存储服务（iSCSI）。云存储网关 目前提供两种...
简介
阿里云对象存储服务（Object Storage Service，简称OSS），是阿里云对外提供的海量、安全、低成本、高可靠的云存储服务。您可以通过本文档提供的简单的REST接口，在任何时间、任何地点、任何互联网设备上进行上传和下载数据。基于OSS，您...
阿里云存储服务
其存储类型分为标准存储、低频访问存储、归档存储、冷归档存储、深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。就价格而言，数据越冷，存储成本越低，需要时的访问成本越高。您可以轻松地在这些存储类型之间转换以优化存储...
基本概念
本文介绍了文件存储NAS相关基本概念，以便于您更好的理解和使用NAS。文件存储NAS使用架构 文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。可支持上千台弹性计算ECS、容器服务ACK等计算节点共享访问，您无需修改...
- 产品推荐
- 这些文档可能帮助您