CPFS并行文件存储

CPFS并行文件存储 提供高性能计算文件存储,支持标准的POSIX和MPI-IO协议,自带的高性能计算程序无需任何接口适配和性能优化即可高效执行,满足高性能文件存储需求。产品架构 CPFS并行文件存储 是针对高性能和超大规模存储场景推出的文件...

查看低频/归档存储文件

在下拉框中选择 低频存储文件 或 归档存储文件,可查看目标文件系统已转储至低频存储或归档存储中的 文件名、文件大小、存储类型 及该文件最近一次被访问的时间等信息。您还可以单击 生命周期策略 页签,查看该文件系统配置的生命周期策略...

生命周期管理FAQ

创建生命周期管理策略时,可以配置低频存储管理规则,将距最近一次访问14天、30天、60天、90天以上的文件转换为低频存储文件;也可以配置归档存储管理规则,将距最近一次访问14天、30天、60天、90天、180天以上的文件转换为归档存储文件。...

数据处理费用

按量付费:归档存储数据取回费用=解冻文件大小(GB)×归档存储文件数据取回单价 资源包:不支持 归档直读数据取回容量(RetrievalDataArchiveDirect)直读归档存储类型文件产生的费用。按直读文件的大小计费。重要 对于已解冻的归档存储...

文件存储NAS

阿里云文件存储NAS(Apsara File Storage)是面向阿里云ECS实例、E-HPC和容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统,支持NFS和SMB协议。文件存储NAS 目前提供极速型、通用性能型...

人工智能AI

AI推理 基于弹性计算的AI推理 AI训练 超级计算集群结合ACK快速实现NLP训练 基于机器学习PAI的云原生AI训练 GPU AI模型训练 基于NAS部署可更换模型的FC Stable Diffusion进行AI绘画创作 使用NAS存储SD模型库并挂载NAS到PAI-EAS加载推理 AI...

控制台快速入门

本文以图片文件为例,为您介绍创建存储空间、上传文件、下载文件、分享文件的快速操作指导。前提条件 已注册阿里云账号并完成实名认证。详情请参见 注册阿里云账号 和 个人实名认证。步骤一:开通OSS服务 打开 OSS开通页面。在OSS开通页面...

存储费用

当您在OSS内存储文件时,OSS会根据您存储的文件类型、大小和时长收取一定的存储费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情,请参见 OSS产品定价。计费项 计费项 计费规则 计费周期 付费方式 标准存储(本地冗余)...

设置生命周期策略

更多信息,请参见 查看低频介质存储文件。同一个文件或目录支持同时配置低频存储规则和归档存储规则,若同时选择,低频存储管理规则天数必须小于归档管理规则天数。生命周期策略执行优先级 在多条生命周期策略指向相同时间,且文件或目录...

生命周期管理概述

更多信息,请参见 查看低频介质存储文件。同一个文件或目录支持同时配置低频存储规则和归档存储规则,若同时选择,低频存储管理规则天数必须小于归档管理规则天数。优势 配置简便,无须编写脚本或手动迁移数据 您只需设置生命周期管理策略...

临时存储费用

冷归档或者深度冷归档存储类型文件(Object)在数据解冻时会生成一份标准存储类型的文件副本用于访问,文件副本在解冻时间结束前会收取临时存储费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情,请参见 OSS产品定价。...

快速入门

文件存储 HDFS 版 适用于互联网行业、金融行业等有数据计算与存储分析需求的行业客户进行海量数据存储和离线计算的业务场景,充分满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。开通 文件存储 ...

创建数据取回任务

如果您需要频繁访问低频介质中存储文件,建议您创建数据取回任务,将指定文件或目录中的数据取回至通用型NAS存储空间,避免频繁访问产生读写流量费用。本文介绍如何创建数据取回任务。计费说明 在执行数据取回任务时,NAS会根据目标文件...

通用型NAS计费

按量付费:费用=每小时归档存储最大存储容量(峰值)×月单价÷30(天)÷24(小时)归档存储不足规定时长容量 针对归档存储类型的文件,如果存储时间不足60天(即1440小时)被删除或缩小文件大小,将会收取原归档文件大小剩余时间(1440-...

计费项

本文为您介绍 文件存储 HDFS 版 服务的计费说明。产品定价 关于 文件存储 HDFS 版 的计费定价,请参见 文件存储 HDFS 版产品定价。计费周期 文件存储 HDFS 版 每小时统计前一小时的实际用量并进行结算,从账户余额中扣除实际消费金额。例如...

计费常见问题

据统计分析,部分用户文件系统中80%的数据均为冷数据,按80/20定律进行成本估算,使用低频存储后,原性能型NAS文件系统的有效存储成本可降低至0.49元/月/GiB,原容量型NAS文件系统的有效存储成本可降低至0.19元/GiB/月。购买了资源包什么...

文件存储CPFS监控概述

通过查看文件存储CPFS文件系统的容量监控和性能信息,您可以了解文件系统的存储容量使用情况和读写吞吐、读写IOPS等情况。通过为文件系统的重要监控指标设置报警规则,您可以及时获知指标异常并快速处理异常。本文介绍文件存储CPFS支持的...

快速使用ossbrowser

ossbrowser是阿里云官方提供的OSS图形化管理工具,帮助您快速管理Bucket和文件,例如创建、删除Bucket,上传、下载、预览、复制、移动、分享文件等。操作视频 观看以下视频快速了解如何快速使用ossbrowser。前提条件 已安装并登录...

性能优化最佳实践

您可以通过调整core-site.xml配置、TestDFSIO配置或避免使用小文件来优化集群性能。调整core-site.xml配置 在测试集群吞吐性能之前建议在core-site.xml文件...将存储文件存储HDFS版 上的小文件聚合成大文件会对整体的分析性能有较帮助。

图形化管理工具ossbrowser快速入门

ossbrowser是阿里云官方提供的OSS图形化管理工具,帮助您快速管理Bucket和文件,例如创建、删除Bucket,上传、下载、预览、复制、移动、分享文件等。操作视频 观看以下视频快速了解如何快速使用ossbrowser。前提条件 已安装并登录...

使用限制

本文介绍了阿里云文件存储NAS的产品规格、操作系统、协议类型、网络及功能使用限制等。产品规格 限制项 说明 每个账号在单个地域内可创建的文件系统数量 通用型NAS:20个 极速型NAS:200个 单个文件系统可创建挂载点的数量 通用型NAS:2个 ...

使用限制

本文主要介绍 文件存储 HDFS 版 的产品规格限制、协议功能限制、Hadoop fs命令限制及API限制。文件系统限制 限制项 限制说明 每个账号在单个地域内可创建的文件系统数量 3个 单个文件系统可创建的挂载点数量 2个 单个文件系统同一时刻可...

使用须知

文件网关须知 建议不要频繁中断大文件拷贝到NFS或SMB共享文件夹。由于后台的分段上传机制,中断大文件拷贝会造成碎片遗留在OSS。这些碎片会影响OSS的空间统计,造成OSS空间统计略大于看到的文件总量。通过OSS的碎片自动删除策略,可以帮助...

性能测试

本文示例的性能参数,均为Linux 系统下采用 FIO 工具的测试结果,以此作为文件存储CPFS产品性能指标参考。操作步骤 远程连接ECS实例。具体操作,请参见 ECS连接方式。安装FIO测试工具。如果已安装,请跳过此步骤,直接运行性能测试命令。...

上传文件概述

本文介绍对象存储OSS Ruby SDK的多种文件上传方式。OSS Ruby SDK文件上传方式如下:上传本地文件:最大不能超过5 GB。流式上传:最大不能超过5 GB。断点续传上传:支持并发上传、断点续传、自定义分片大小。大文件上传推荐使用断点续传。...

将NAS数据迁移至本地

文件存储NAS支持通过rsync命令行工具、Robocopy工具等直接下载数据到本地文件。您也可以将数据同步到OSS后再在OSS侧下载数据到本地文件。重要 下载文件数据需要占用ECS公网带宽,建议您新购一台ECS实例专门负责文件数据下载,避免占用业务...

上传文件概述

在对象存储OSS中,操作的基本数据单元是文件(Object)。OSS Node.js SDK提供了丰富的文件上传方式。OSS Node.js SDK文件上传方式如下:上传本地文件:最大不能超过5 GB。上传本地内存:最大不能超过5 GB。流式上传:最大不能超过5 GB。分...

计费案例

除100 GB文件在不同存储类型下产生的存储费用以外,由于归档(本地冗余)类型最低存储时间为60天,此时将产生20天的归档存储不足规定时长容量费用,以及标准存储转低频访问、以及低频访问转归档存储类型产生的请求费用。则支付总费用29.91...

概述

本文简要说明非阿里云数据迁移至阿里云文件存储NAS的费用说明、操作流程及迁移工具选择。费用说明 非阿里云数据迁移至阿里云NAS时,会涉及如下费用:文件存储NAS存储费用,推荐购买资源包抵扣。关于NAS的计费详情,请参见 计费概述。如果您...

OSS小时数据

取值如下:standard:标准存储-本地冗余 IA:低频访问-本地冗余 archive:归档存储-本地冗余 coldarchive:冷归档存储 deepcoldarchive:深度冷归档存储 standard-zrs:标准存储-同城冗余 IA-zrs:低频访问-同城冗余 archive-zrs:归档存储...

管理数据流动任务

本文介绍如何在文件存储控制台创建、管理CPFS数据流动任务及查看任务报告。前提条件 已创建CPFS Fileset。具体操作,请参见 创建Fileset。已创建数据流动。具体操作,请参见 创建数据流动。任务说明 任务类型 按任务对数据的操作,可分为...

cp(拷贝文件

拷贝文件(Object)是指在不改变文件内容的情况下,将同一地域下的源存储空间(Bucket)内的文件复制到目标Bucket,或者将文件复制到相同存储空间(Bucket)的其他目录。您可以通过ossutil的 cp 完成拷贝。注意事项 要拷贝文件,您必须具有...

为什么云存储网关与OSS上的文件不一致

存储网关上的文件与OSS对象一一对应,提供与OSS对象1:1映射的文件共享服务,您可以通过网关以标准的POSIX接口访问OSS上的资源。云存储网关与OSS是相互独立的云产品,为保证您通过网关看到的文件视图与OSS一致,需要有特殊的元数据同步...

迁移数据至阿里云NAS

配置数据传输中转节点后,您还要使用迁移工具迁移数据至阿里云文件存储NAS。本文介绍如何通过迁移工具将非阿里云的数据迁移至文件存储NAS。前提条件 已配置数据传输中转节点ECS实例。具体操作,请参见 配置数据传输中转节点。使用SFTP客户...

使用限制

读写方式 QPS 顺序读写 2,000 非顺序读写 10,000 如果您在上传大量文件时,在命名上使用了顺序前缀(如时间戳或字母顺序),可能会出现大量文件索引集中存储存储空间中某个特定分区的情况,此时如果您的请求速率过,会导致请求速率下降...

基本概念

用来描述文件信息,例如文件类型、编码方式等 Data 文件数据 Key 文件名 ACL(Access Control List)存储空间或者文件的权限 说明 如果没有特殊说明,本文中出现和术语表中相同的英文和中文,表达的是相同的意思。某些场景下,为了表述方便会...

使用限制

本文介绍CPFS的文件系统限制、客户端限制、Fileset限制、数据流动限制、协议服务限制及容量监控限制。文件系统 限制项 阈值 说明 单个文件系统可创建的挂载点数量 1个 单个CPFS文件系统最多支持创建一个挂载点。单个客户端挂载文件系统个数...

存储网关软件版公测

存储网关软件版是一款可以安装在阿里云用户ECS上或者用户本地数据中心客户端的产品,提供类似ossfs的功能,使用云存储网关软件版可以将OSS桶挂载到客户端本地以POSIX文件接口进行访问,从而您可以像操作本地文件一样操作OSS里面的文件。...

CPFS-NFS客户端挂载文件系统(推荐)

hard:在文件存储CPFS暂时不可用的情况下,使用文件系统上某个文件的本地应用程序时会停止并等待至该文件系统恢复在线状态。建议启用该参数。timeo:指定时长,单位为0.1秒,即CPFS-NFS客户端在重试向文件系统发送请求之前等待响应的时间。...

命令行工具ossutil快速入门

ossutil是阿里云官方提供的OSS命令行管理工具,当您需要快速上传大文件、下载文件、分享文件时,可以使用ossutil工具。首次使用时您需要先创建存储空间,将本地文件上传到存储空间。上传完成后,可以按需将文件下载至本地,或者通过生成...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 数据库文件存储 文件存储HDFS版 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用