文件系统存储类型

标准存储:提供高可靠、高可用、高性能的文件存储服务,适用于存储频繁访问的热数据。在创建文件系统后,文件系统数据首先存储在标准存储中,然后才能使用生命周期策略将数据转储至低频存储或归档存储。更多关于通用型NAS标准存储的信息,...

如何查看Bucket中某个目录下所有文件存储大小

您可以通过阿里云SDK、命令行工具ossutil、REST API等多种方式,查看Bucket中某个目录下所有文件存储大小。阿里云SDK 您可以通过 Java SDK、PHP SDK 、Python SDK、Go SDK、C++ SDK、C SDK 查询目录下所有文件各自的存储大小。命令行工具...

生命周期管理FAQ

执行数据取回任务时,需要读取目标文件中的数据,将按照目标文件大小文件存储类型收取低频存储或归档存储读流量费用。数据取回任务完成后,文件占用通用型NAS存储容量,将按照文件大小收取通用型NAS文件系统存储容量费用。更多信息,请...

查看低频/归档存储文件

在下拉框中选择 低频存储文件 或 归档存储文件,可查看目标文件系统已转储至低频存储或归档存储中的 文件名、文件大小存储类型 及该文件最近一次被访问的时间等信息。您还可以单击 生命周期策略 页签,查看该文件系统配置的生命周期策略...

迁移Hadoop文件系统数据至JindoFS

本文以OSS为例,介绍如何将Hadoop文件系统上的数据迁移至JindoFS。迁移数据 Hadoop FsShell 对于文件较少或者数据量较小的场景,可以直接使用Hadoop的FsShell进行同步:hadoop dfs-cp hdfs:/emr-cluster/README.md jfs:/emr-jfs/hadoop dfs...

迁移开源HDFS的数据到文件存储 HDFS 版

说明 使用 hadoop distcp 命令将原集群数据迁移至 文件存储 HDFS 版 时,请注意 文件存储 HDFS 版 不支持以下参数,其它参数使用和 Hadoop DistCp工具官方说明文档 一致。文件存储 HDFS 版 及命令行存在限制的更多信息,请参见 使用限制。...

使用Fuse-DFS挂载文件存储 HDFS 版

本文主要介绍如何使用Fuse-DFS工具实现 文件存储 HDFS 版 在本地文件系统的映射。前提条件 已 创建文件系统 和 添加挂载点。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。建议您使用的Hadoop版本不低于2.7.2,本文使用的Hadoop版本...

高级管理FAQ

执行数据取回任务时,需要读取目标文件中的数据,将按照目标文件大小文件存储类型收取低频存储或归档存储读流量费用。数据取回任务完成后,文件占用通用型NAS存储容量,将按照文件大小收取通用型NAS文件系统存储容量费用。更多信息,请...

CPFS并行文件存储

CPFS并行文件存储 提供高性能计算文件存储,支持标准的POSIX和MPI-IO协议,自带的高性能计算程序无需任何接口适配和性能优化即可高效执行,满足高性能文件存储需求。产品架构 CPFS并行文件存储 是针对高性能和超大规模存储场景推出的文件...

监控与日志

监控与日志可有效保障您文件存储NAS资源的可用性、业务的正常运行和健康度。您可通过对应的监控能力,持续收集监控数据。阿里云提供了各种监控与日志审计相关的服务,例如云监控、配置审计等,帮助您实时监控云资源的使用情况和业务运行...

计费项

本文为您介绍 文件存储 HDFS 版 服务的计费说明。产品定价 关于 文件存储 HDFS 版 的计费定价,请参见 文件存储 HDFS 版产品定价。计费周期 文件存储 HDFS 版 每小时统计前一小时的实际用量并进行结算,从账户余额中扣除实际消费金额。例如...

文件存储 HDFS 版上使用Apache HBase

本文主要介绍在 文件存储 HDFS 版 上使用Apache HBase的方法。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。已部署...

从自建HDFS迁移数据

常见问题 整体迁移速度受Hadoop集群与文件存储HDFS之间的带宽、集群规模影响。如果迁移数据量大,建议先尝试迁移几个目录评估下整体时间。如果只能在指定时间段内迁移数据,可以将目录切分为几个小目录,依次迁移。一般全量数据同步时,...

文件存储 HDFS 版上使用Presto

Presto使用maven-shade-plugin插件打包,对引入的Hadoop依赖进行了重命名,文件存储 HDFS 版 Java SDK和Hadoop共用了protobuf-xxx.jar包,Presto通过Hive Metastore读取 文件存储 HDFS 版 上的数据时,文件存储 HDFS 版 获取不到Presto重...

管理Hadoop回收站

Hadoop回收站是Hadoop文件系统的重要功能,可以恢复误删除的文件和目录。本文为您介绍Hadoop回收站的使用方法。背景信息 回收站是Hadoop Shell或部分应用(Hive等)对Hadoop FileSystem API在客户端的封装,当客户端配置或者服务端配置打开...

管理Hadoop回收站

Hadoop回收站是Hadoop文件系统的重要功能,可以恢复误删除的文件和目录。本文为您介绍Hadoop回收站的使用方法。背景信息 回收站是Hadoop Shell或部分应用(Hive等)对Hadoop FileSystem API在客户端的封装,当客户端配置或者服务端配置打开...

管理Hadoop回收站

Hadoop回收站是Hadoop文件系统的重要功能,可以恢复误删除的文件和目录。本文为您介绍Hadoop回收站的使用方法。背景信息 回收站是Hadoop Shell或部分应用(Hive等)对Hadoop FileSystem API在客户端的封装,当客户端配置或者服务端配置打开...

文件存储 HDFS 版上使用Apache Tez

./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/hdfs/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/hdfs/lib/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/yarn/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/yarn/lib/*:./...

存储费用

按量付费:深度冷归档存储不足规定时长费用=被删除文件大小(GB)×深度冷归档存储文件存储月单价÷30(天)÷24(小时)×(4320-已存储时间)资源包:不支持 预留空间:不支持 无地域属性预留空间:不支持 SCU:不支持 无地域属性存储...

账单和用量查询

您可以通过查询文件存储NAS的账单,及时了解其收费明细,更好地从费用分配角度进行业务决策。本文为您介绍查询费用账单和用量明细的操作方法。查看文件系统费用账单 登录 用户中心。在左侧导航栏,选择 账单管理>账单详情。在 明细账单 页...

控制台快速入门

本文以图片文件为例,为您介绍创建存储空间、上传文件、下载文件、分享文件的快速操作指导。前提条件 已注册阿里云账号并完成实名认证。详情请参见 注册阿里云账号 和 个人实名认证。步骤一:开通OSS服务 打开 OSS开通页面。在OSS开通页面...

功能特性

管理Fileset 目录配额 管理文件系统中某个目录所能包含的文件数量或者文件大小或者某个用户所能使用的资源 目录配额 生命周期管理 阿里云文件存储通用型 NAS 推出的生命周期管理功能,可以帮助您将低频访问的冷文件数据从标准存储转换到...

存储空间清单

您可以使用对象存储OSS的清单功能获取存储空间(Bucket)中指定文件(Object)的数量、大小存储类型、加密状态等信息。相对于GetBucket(ListObjects)接口,在海量Object的列举场景中,建议您优先使用清单功能。警告 为避免影响OSS-HDFS...

0044-00000404

问题描述 请求指定的目标文件大小超出接口限制。问题原因 您发起了GetSignedPlaylist请求来获取m3u8文件中的每个ts文件签名后的URL,您在请求中指定的目标文件大小超出了接口限制,导致返回错误。问题示例 比如您发起了如下请求:GET/...

数据处理费用

按量付费:归档存储数据取回费用=解冻文件大小(GB)×归档存储文件数据取回单价 资源包:不支持 归档直读数据取回容量(RetrievalDataArchiveDirect)直读归档存储类型文件产生的费用。按直读文件大小计费。重要 对于已解冻的归档存储...

文件存储 HDFS 版和数据库MySQL双向数据迁移

本文介绍如何使用Sqoop工具实现 文件存储 HDFS 版 和关系型数据库MySQL之间的双向数据迁移。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已搭建Hadoop集群。建议您使用的...

通用型NAS计费

通用型NAS计费项 通用型NAS按照存储规格、存储大小(每小时峰值)和时长收取一定的存储费用。如果您的业务涉及生命周期管理功能时,NAS会根据您转存储的存储类型收取存储容量费用和数据读写流量费用。关于生命周期管理的详细信息,请参见 ...

计费常见问题

本文介绍文件存储NAS(通用型NAS/极速型NAS)计费常见问题。包括通用型NAS资源包如何使用或抵扣、NAS服务如何停止计费、购买资源包为什么还欠费等问题。开通NAS服务后,就开始计费吗?仅开通NAS服务,不会产生费用。当您在通用型NAS中写入...

0017-00000102

问题描述 请求体大小超出限制,比如上传文件时,文件大小超出限制。问题原因 该报错表示请求体大小超出限制,需要调整至合理范围。问题示例 无 解决方案 检查请求中请求体的大小,或待上传文件大小是否超出接口限制。例如PutObject中,添加...

创建文件系统

前提条件 已开通文件存储NAS服务。首次登录 文件存储NAS产品详情页 时,按照页面引导开通服务。重要 在开通页面购买的产品为NAS资源包,并不是NAS文件系统。NAS资源包仅用于抵扣NAS文件系统存储容量费用。更多信息,请参见 资源包概述。...

ECS实例挂载同一NFS文件系统出现数据不同步的情况

问题描述 当您使用两个ECS实例挂载同一个NFS文件系统,在ECS A实例上追加写文件,在ECS B实例上使用 tail-f 命令查看文件内容的变化时,在ECS A实例上写完之后,在ECS B实例上查看文件内容变化...mount-t nfs4-o noac/mnt/适用于 文件存储NAS

NAS性能测试

文件存储NAS的官网性能指标,请参见 文件存储 NAS。如果您有任何反馈或疑问,请单击下方按钮联系NAS技术支持进行咨询。NAS技术支持 注意事项 性能测试前,请注意以下事项。吞吐最大不会超过ECS内网带宽,如果内网带宽太小,则吞吐会被流量...

HDFS常见命令介绍

hadoop fs-du/hello.txt 查看目录下所有文件大小hadoop fs-du/dir cat 查看HDFS上文件的内容。语法 hadoop fs-cat示例:查看 hello.txt 文件的内容。hadoop fs-cat/hello.txt 查看/dir/sub-dir/目录下 hello_world.txt 文件的内容。...

新购ECS时挂载NAS文件系统

挂载多个文件系统 如果要在新购买的ECS实例上同时挂载多个NAS文件系统,请您继续单击 添加文件存储 进行配置。并注意以下几点配置事项:挂载地址:所有的挂载地址必须属于同一个专有网络VPC。如果没有同属于一个VPC的挂载地址,可以为NAS...

挂载文件存储 HDFS 版文件系统

本文介绍挂载及卸载 文件存储 HDFS 版 文件系统的操作。前提条件 已为ECS实例安装JDK,且JDK版本不低于1.8。已创建 文件存储 HDFS 版 文件系统并添加挂载点。具体操作,请参见 创建文件系统 和 添加挂载点。已安装Hadoop客户端,建议您使用...

将NAS数据迁移至本地

文件存储NAS支持通过rsync命令行工具、Robocopy工具等直接下载数据到本地文件。您也可以将数据同步到OSS后再在OSS侧下载数据到本地文件。重要 下载文件数据需要占用ECS公网带宽,建议您新购一台ECS实例专门负责文件数据下载,避免占用业务...

临时存储费用

冷归档或者深度冷归档存储类型文件(Object)在数据解冻时会生成一份标准存储类型的文件副本用于访问,文件副本在解冻时间结束前会收取临时存储费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情,请参见 OSS产品定价。...

上传文件

当您将文件上传到OSS时,文件将作为OSS Object进行存储。Object包含文件数据本身和描述该对象的元数据。在一个Bucket中,您可以上传大量的Object。上传方式 OSS提供以下文件上传方式:简单上传:适用于上传小文件文件大小不超过5 GB,...

生命周期管理概述

阿里云文件存储NAS推出的生命周期管理功能,可以帮助您将低频访问的冷文件数据从标准存储转换到低频存储或归档存储中,并采用低频存储或归档存储计费方式,从而减少文件系统的存储费用。本文主要介绍生命周期的策略、使用限制、应用场景、...

迁移数据至阿里云NAS

配置数据传输中转节点后,您还要使用迁移工具迁移数据至阿里云文件存储NAS。本文介绍如何通过迁移工具将非阿里云的数据迁移至文件存储NAS。前提条件 已配置数据传输中转节点ECS实例。具体操作,请参见 配置数据传输中转节点。使用SFTP客户...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储HDFS版 文件存储 CPFS 数据库文件存储 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用