查看NAS性能监控
您可以使用FIO工具测试文件系统性能并在云监控控制台查看性能指标图表。具体操作，请参见 NAS性能测试。例如，您可以在挂载NAS的ECS实例上执行命令（挂载目录为/mnt）：fio-numjobs=1-iodepth=128-direct=1-ioengine=libaio-sync=1-rw=...
性能测试
背景信息 推荐使用 FIO 工具测试CPFS文件系统性能，不同工具测试的CPFS文件系统性能会有差异，难以反映真实性能。本文示例的性能参数，均为Linux 系统下采用 FIO 工具的测试结果，以此作为文件存储CPFS产品性能指标参考。操作步骤 远程连接...
NAS性能测试
在Windows操作系统中，测试NFS协议NAS文件系统性能会受限于Windows NFS客户端串行执行单个文件系统的请求，请调整-numjobs 参数增加FIO测试文件数量。操作步骤 远程连接ECS实例。具体操作，请参见 ECS连接方式。安装FIO测试工具。如果已...
开发测试
本文列举了基于文件存储NAS实现高性能、低成本自动化CI/CD系统的最佳实践案例。基于K8s、NAS、GitLab、Jenkins的持续集成交付容器环境最佳实践 Serverless ACK弹性低成本CI/CD系统 使用文件存储NAS构建Jenkins持续集成环境 使用极速型NAS...
查看CPFS性能监控
通过性能监控功能，您可以实时查看文件系统的读写IOPS、读写吞吐等性能概况。本文介绍如何查看CPFS文件系统的性能监控数据。前提条件 已开通云监控服务。您可以登录 云监控产品详情页，根据页面提示开通服务。已创建文件系统。具体操作，请...
存储类型概述
对象存储OSS提供标准、低频访问、归档、冷归档、深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。...① 数据取回费用中的数据是从底层分布式存储系统读取的数据量，在公网传输的数据量会计入到流出流量的计费项中。
元数据性能测试
内存：16 GB 机器数量：6台 网络带宽：1.5 Gbps 文件存储 HDFS 版 配置 实例大小：10 TB 吞吐限速：1000 MB/s 软件配置 Apache Hadoop：Hadoop 2.7.6 测试工具 NNbench是Hadoop系统自带的基准测试组件，NNbench用于测试元数据操作的性能。...
集群吞吐性能测试
4核 内存：16 GB 机器数量：6台 网络带宽：1.5 Gbps 文件存储 HDFS 版 配置 实例大小：10 TB 吞吐限速：1000 MB/s 软件配置 Apache Hadoop：Hadoop 2.7.6 测试工具 TestDFSIO是Hadoop系统自带的基准测试组件，用于测试DFS的IO吞吐性能。...
通过PrestoDB使用Tablestore
预留模式：计费项包括计算能力、数据存储量和外网下行流量，其中数据存储量包括高性能存储、容量型存储和多元索引存储。使用计算引擎访问表格存储时会消耗计算资源。存储元数据的表占用的数据存储量与创建实例时的存储规格相关。按量模式：...
功能发布记录
2023-11-19 华东1（杭州）、华东2（上海）、华北2（北京）、华北3（张家口）、华北6（乌兰察布）、华南1（深圳）和新加坡地域下的高性能实例 和标准型（高性能存储）实例 中国香港地域下的容量型实例 和标准型（容量型存储）实例 华东1...
CPFS存储卷概述
功能介绍 文件存储CPFS是阿里云推出的全托管、可扩展的高性能共享文件存储系统，支持POSIX、MPI-IO和NFS协议。针对GPU和CPU多机计算场景进行了深度优化，提供对数据百GB/s吞吐、亚毫秒级的访问和百万级IOPS的数据读写请求，CPFS提供了统一...
计费常见问题
合计基准容量=文件系统规格用量数据（容量型使用量/性能型使用量/高级型使用量/低频存储使用量）×对应的资源包折算系数-已购通用型NAS资源包容量 例如，您领取了一个通用型NAS资源包（50 GiB，3个月），在一个计费周期内，您账号下的容量...
实践教程概览
创建以CPFS为共享存储的E-HPC集群 CPFS是一种高性能并行文件存储系统，以CPFS为共享存储的E-HPC集群适合动画渲染、生命科学、气象预报、能源勘探等需要超高吞吐的应用场景。本教程介绍如何创建以CPFS为共享存储的高性能计算集群，为您提供...
创建以CPFS为共享存储的E-HPC集群
背景信息 CPFS（Cloud Paralleled File System）是一种高性能并行文件存储系统，专为AI训练和E-HPC等高性能计算场景打造，最大支持数十GB/s吞吐能力。CPFS的数据存储在集群中的多个数据节点，并可由多个客户端同时访问，从而能够为大型E-...
监控存储资源
性能监控 查看存储性能如下指标信息：IOPS 吞吐量 延迟 元数据QPS 容量监控 查看存储容量如下指标信息：存储空间（不包括回收站）文件数 时间范围 支持快速选择常用时间范围，也可以自定义设置要查询的时间范围。快速选择：1小时、4小时、...
JindoData版本说明
在性能优化方面，JindoFS存储系统通过存量以及增量的方式优化Du和Count性能，显著提升Du和Count操作性能。对于JindoSDK而言，JindoSDK 4.6.x版本支持文件以及数据块级别的校验，提高JindoSDK写入链路的稳定性。此外，JindoSDK还支持多路径...
什么是文件存储NAS
文件存储CPFS：可弹性扩展的POSIX/NFS接口全闪存文件存储系统，提供亚毫秒级的访问延迟和百万级IOPS，供高性能GPU计算使用。更多信息，请详见 CPFS产品详情页。在线迁移服务：您可以使用在线迁移服务将OSS数据迁移至NAS，更多信息，请参见 ...
性能基线配置
在压测开始前，您需要配置性能基线，为系统性能提供参照点，用于判断压测是否通过以及系统性能是否符合要求，帮助您评估系统在长时间运行下的可靠性和稳定性。本文介绍如何设置以及使用性能基线功能。设置性能基线 登录 PTS控制台，在左侧...
测试工具
本章节为您介绍本次表格存储性能测试的测试工具。YCSB简介 Yahoo!Cloud Serving Benchmark（YCSB）是一款开源的分布式性能测试工具，常用于测试NoSQL产品的读写性能。YCSB支持常见的NoSQL数据库和数据网格产品，如Cassandra、MongoDB、...
使用云存储
文件存储CPFS 阿里云完全托管、可扩展的并行文件存储系统，针对高性能计算场景的性能要求进行了深度优化，提供对数据毫秒级的访问和百万级IOPS的数据读写请求。更多信息，请参见 文件存储CPFS概述。更多信息，请参见 阿里云存储服务。存储...
资源预估选型
存储类型 性能指标 适用场景 写平均RT 读平均RT 高性能存储（SSD）适用于对延迟要求高的在线业务，例如广告、推荐、Feed流。毛刺率低，通常延时均在几ms级别。多元索引存储（SSD）不论实例的存储类型，使用多元索引功能时，表格存储构建...
评估合适的云服务
存储指标 在业务场景、功能和架构的基础上，还需要将业务系统数据转化为存储性能指标以便进一步评估存储产品和类型选择，主要的存储指标包括吞吐量、IOPS、I/O延迟、访问频率、数据规模、数据增长率、数据可靠性等，必要的基准测试以及持续...
测试模型
本章节为您介绍本次表格存储性能测试的测试模型。表结构 主键名 类型 编码方式 长度 userid string 4-Byte-Hash+Long.toHexString 20 属性列 属性列名 类型 长度 field0 string 100 field1 string 100 field2 string 100 field3 string 100...
性能优化最佳实践
您可以通过调整core-site.xml配置、TestDFSIO配置或避免使用小文件来优化集群性能。调整core-site.xml配置 在测试集群吞吐性能之前建议在core-site.xml文件中增加或修改如下配置，同步到所有依赖hadoop-common的节点上并重启集群服务。...
一般性问题
数据库文件存储DBFS是面向数据库场景优化的POSIX兼容的共享读写的文件存储系统。主要适用于：OLTP及OLAP数据库场景：例如，MySQL、PostgreSQL等。NoSQL数据库场景：例如，MongoDB、RocksDB等。2.挂载点是什么概念、有什么作用？挂载点是...
测试结果（高性能实例）
本章节为您介绍本次表格存储性能测试中高性能实例的测试结果。测试解析 同分区情况下，若随着压力升高，随机写操作延时变化不明显，则说明后端该分区上的资源还比较空闲，随着压力增高，QPS会继续提高。同分区情况下，若随着压力升高，随机...
存储I/O性能
存储I/O性能又称存储读写性能，指不同ECS实例规格挂载云盘时，可以达到的性能表现，包括IOPS和吞吐量。重要 本章节仅适用于全新一代企业级实例规格族，包括hfg7、hfc7、hfr7、g6e、c6e、r6e等，更多规格族请参见 全新一代企业级实例规格族...
概述
大数据分析 如果您的业务采用MySQL数据库，随着业务的发展，大数据分析场景逐渐增多，而MySQL数据库进行大数据分析需要结合流式组件、存储系统、计算组件等工具，操作复杂且难度大，您可以选择将MySQL数据库迁移到表格存储中实现大数据分析...
监控块存储
云盒支持监控其包含的块存储资源的IOPS、吞吐量和存储容量，您可以在控制台查看块存储的监控数据。背景信息 云盒内的块存储资源支持SSD云盘和ESSD（PL0）云盘。通过监控云盘的IOPS、吞吐量和容量，您可以了解云盘的实际性能。IOPS（Input/...
测试结果（容量型实例）
本章节为您介绍本次表格存储性能测试中容量型实例的测试结果。测试解析 同分区情况下，若随着压力升高，随机写操作延时变化不明显，则说明后端该分区上的资源还比较空闲，随着压力增高，QPS会继续提高。同分区情况下，若随着压力升高，随机...
并发用户、RPS、TPS的解读
TPS：Transaction Per Second，每秒事务数，是衡量系统性能的一个非常重要的指标。说明 系统每秒处理事务数越多证明您的机器性能越好。RPS：Request Per Second，每秒请求数。RPS模式适合用于容量规划和作为限流管控的参考依据。RT：...
预留模式和按量模式的区别
而按量模式按照高性能存储与预留CU方式计费。区别 预留模式 按量模式 实例类型 标准型 高性能 容量型 计算计费 统一规格VCU（4核16 GB），按照包年包月方式计费 根据使用量提前预估购买使用资源 涵盖读、写、索引计算、通道等计算消耗 根据...
云盘存储卷概述
180} 基准性能：min{120+0.5*容量,350} 基准性能：min{120+0.5*容量,350} 性能突发：4 GB/s 单路随机写平均时延（ms），Block Size=4K 0.3~0.5 0.2 0.2 重要 邀测期间，云盘存储卷的性能指标会受到以下限制：容量上限为2TiB，即2048GiB；...
存储类型
存储类型介绍 存储类型 说明 ESSD云盘 ESSD（Enhanced SSD）云盘，是阿里云推出的超高性能云盘产品。ESSD云盘基于新一代分布式块存储架构，结合25GE网络和RDMA技术，提供单盘高达100万的随机读写能力和更低的单路时延能力。ESSD云盘分为...
存储类型
存储类型介绍 存储类型 说明 ESSD云盘 增强型SSD云盘（Enhanced SSD云盘，下文简称ESSD云盘），是阿里云全新推出的超高性能云盘产品。ESSD云盘基于新一代分布式块存储架构，结合25GE网络和RDMA技术，为您提供单盘高达100万的随机读写能力和...
敏感数据安全防护方案
背景信息 敏感数据主要包括个人隐私信息、密码/密钥、敏感图片等高价值数据，这些数据通常会以不同的格式存储在您的各类存储系统中。如何更好地发现、定位、保护这些数据，对您的企业非常重要。OSS本身提供了细粒度的 权限管理 和 数据加密...
CDH6数据迁移
为了保证在更换文件存储系统的过程中文件数据不丢失，需要暂停数据处理服务（例如：YARN服务、Hive服务、Spark服务、HBase服务等），HDFS服务仍需保持运行。此处以停止Hive服务为例进行说明。在CDH Web主页，找到Hive服务，在右侧的操作...
计费项
按量付费：数据流动带宽费用=（按每小时配置的最高带宽-CPFS文件系统存储容量/1200 GiB×50 MB/s）×每小时数据流动带宽单价 文件存储CPFS提供数据流动带宽优惠政策，即每1200 GiB CPFS文件系统存储容量减免50 MB/s的数据流动带宽费用。...
释放文件系统实例资源
警告 删除文件系统后，存储在文件系统中的数据将被删除且无法恢复，请在删除前确认数据已不再使用。如果需要继续使用文件系统中的数据，请提前迁移数据。关于迁移数据的更多信息，请参见 迁移说明。前提条件 如果为RAM用户，请确认RAM用户...
计费说明
计量项 DBFS计费按以下计量项进行：版本类型 计量项 计费标准 企业版 存储空间 按当前文件系统存储空间的容量与使用时长进行计费。标准版/企业版 快照 根据云盘快照费用进行计费。价格总览 版本类型 地域 单价（GB/小时/元）标准版 杭州、...
- 产品推荐
- 这些文档可能帮助您