对象命名
命名示例 根据Object存储于Bucket内的不同位置，Key的表示方法也有所区别，具体说明如下：Object所在Bucket的位置 Key的表示方法 目标存储空间examplebucket根目录下存放了名为exampleobject.txt的Object exampleobject.txt 目标存储空间...
mkdir（创建目录）
例如您需要在目标存储空间examplebucket中Photo/目录下存放2021年份的快照信息。ossutil64 mkdir oss:/examplebucket/Photo/2021/如果误删除了2021/目录，且上一级目录Photo/下文件个数为0，则Photo/目录也会被自动移除。将文件上传至目标...
云存储网关
普通的文件系统如果在同一目录下存放太多文件，经常会出现问题。而OSS总的存储容量以及单个存储空间的容量均无上限。您可以在一个存储空间内存放无限量的文件，OSS自动将您的数据副本存储至同一地域的不同服务器，所有数据副本共享阿里云的...
对象存储OSS
普通的文件系统如果在同一目录下存放太多文件，经常会出现问题。而OSS总的存储容量以及单个存储空间的容量均无上限。您可以在一个存储空间内存放无限量的文件，OSS自动将您的数据副本存储至同一地域的不同服务器，所有数据副本共享阿里云的...
极速型NAS
极速型NAS是基于阿里云最新一代网络架构和全闪存储打造的高性能共享文件存储产品，全托管的云存储服务与阿里云丰富的计算服务...建议：单个极速型NAS文件系统的文件数量超过2000万个后，建议单个目录下存储的文件或子目录数量不超过1万个。
存储空间清单
您可以使用对象存储OSS的清单功能获取存储空间（Bucket）中指定文件（Object）的数量、大小、存储类型、加密状态等信息。相对于GetBucket（ListObjects）接口，在海量Object的列举场景中，建议您优先使用清单功能。警告 为避免影响OSS-HDFS...
数据存储目录结构说明
本章介绍文件引擎...目录 说明/${实例ID}-global/${实例ID}_xxx 宽表引擎数据存储目录/solr 搜索引擎数据存储目录/tsdb 时序引擎数据存储目录 说明${实例ID}：lindorm实例ID。xxx：实例所在的区域，如cn-shanghai则表示为上海的实例。
安装目录
本文主要说明阿里云数据库存储服务DBFS创建后的安装目录。DBFS安装目录说明：DBFS服务申请成功后，将会在用户的ECS中创建“/opt/dbfs/”目录，请用户务必不要删除此目录：/opt/dbfs/app/：DBFS服务二进制软件目录。opt/dbfs/data/：DBFS...
配置训练数据和代码
在作业运行过程中，ACK集群会将本地存储目录挂载到作业所在的容器中，使作业能够访问本地存储目录中的数据和模型。单击 提交。新增数据配置创建完成后，您可在 数据配置 页面的 数据 页签查看新建训练数据集的详细信息。配置训练代码 在AI...
查看低频/归档存储文件
您可以通过NAS控制台查看已转储至低频存储或归档存储中的文件、低频存储或归档存储使用量以及该文件最近一次被访问的时间等信息。...使用API 您也可以通过调用 GetDirectoryOrFileProperties 查询指定目录下低频存储或归档存储的文件信息。
冷热分层存储
如果您需要在这三种类型的目录下创建文件，可以在标准类型目录下创建并关闭文件后，通过 rename 操作转移到低频、归档以及冷归档目录。数据转换为归档或者冷归档存储类型时，系统开销大，解冻取回慢，请谨慎选择。不支持数据在归档和冷归档...
如何查看Bucket中某个目录下所有文件的存储大小？
您可以通过阿里云SDK、命令行工具ossutil、REST API等多种方式，查看Bucket中某个目录下所有文件的存储大小。阿里云SDK 您可以通过 Java SDK、PHP SDK 、Python SDK、Go SDK、C++ SDK、C SDK 查询目录下所有文件各自的存储大小。命令行工具...
HDFS组件使用的本地磁盘目录
如果节点有两块盘，那么存储目录为/mnt/disk1/hdfs和/mnt/disk2/hdfs。高可用集群 组件 使用目录 描述 ZKFailoverController（ZKFC）无 ZFKC不使用本地磁盘目录。NameNode/mnt/disk1/hdfs/name/mnt/disk1/hdfs/edit/mnt/disk1/hdfs/name：...
使用文件管理器管理文件
场景二：在不同目录下操作（即目标存放路径与源存放路径不同）在 站点根目录 下，选中需要复制的文件或目录，单击 复制，然后单击 粘贴。在弹出的 提示 对话框中，单击 粘贴路径 后的 浏览。选择文件或目录的目标存放路径，单击 确认。目标...
创建文件时报错：553 could not create file
使用FTP客户端连接云虚拟主机后，在云虚拟主机的站点目录下创建文件时，提示 553 could not create file 错误信息。本文介绍这种情况的可能原因和解决方案。问题现象 使用FTP客户端在云虚拟主机的站点目录下创建文件时，创建失败并提示 553...
restore（解冻文件）
解冻多个归档类型Object 示例一：不同目录下 当您需要解冻examplebucket中的多个归档类型Object，且这些Object归属于Bucket的不同目录下，例如exampleobject1.jpg位于examplebucket根目录下，exampleobject2.png位于examplebucket的dir1/...
生命周期管理FAQ
关联目录下已经转储至低频存储或归档存储中的文件仍将维持当前存储状态。已设置生命周期管理策略的目录删除策略后，重新设置新的生命周期管理策略，会重复转储文件吗？不会。重新配置生命周期管理策略后，该策略通过检查机制跳过目录下已经...
开通并授权访问OSS-HDFS服务
禁止以非OSS-HDFS提供的方式对OSS-HDFS的数据存储目录.dlsdata/及目录下的Object执行写入操作，例如重命名目录、删除目录或者删除Object等，否则会影响OSS-HDFS服务的正常使用或者引发数据丢失的风险。在删除已开通OSS-HDFS服务的Bucket...
实时日志查询常见示例
如果您需要分析某个OSS目录下文件的外网流出流量，您可以通过OSS访问日志中的 host 字段过滤出OSS外网访问域名，通过 sync_request 字段排除CDN回源请求，通过 object 字段前缀匹配某个OSS目录下的文件，然后通过 content_length_out 字段...
使用回收站
使用OSS-HDFS回收站时，需要客户端将待删除文件挪至指定目录，并由服务端定时清理该目录下的数据。删除文件说明 当您从OSS-HDFS服务删除文件时，文件不会立即被删除，而是转至/user/<username>/.Trash/Current 目录下。经过30分钟后，...
使用前须知
如果Bucket开通了OSS-HDFS服务并设置了保留策略，会导致通过OSS-HDFS提供的方式删除.dlsdata/目录下的数据时提示删除成功，但在保留策略有效期内OSS仍将保留该目录下被删除的数据，且在保留策略失效后也无法识别并删除.dlsdata/目录下相关...
管理目录
删除目录 警告 删除目录会同步删除目录下包含的子目录以及所有文件，请谨慎操作。以下代码用于删除log/目录及目录下的所有文件。const OSS=require('ali-oss');const client=new OSS({/yourregion填写Bucket所在地域。以华东1（杭州）为例...
管理目录
bucket.put_object('exampledir/','')删除目录 警告 删除目录会同步删除目录下包含的子目录以及所有文件，请谨慎操作。以下代码用于删除examplebucket中log目录及目录下的所有文件。coding:utf-8-*-import oss2 from oss2.credentials ...
Windows应用程序
Windows容器 Windows容器使用阿里云NAS SMB文件系统做持久化存储目录 阿里云ACK服务使用Windows容器挂载NAS SMB最佳实践 权限控制 阿里云SMB协议文件系统AD身份认证和ACL权限控制使用场景 使用AD域实现用户身份认证和文件级别的权限访问...
挂载问题
数据库文件存储（DBFS）默认会在“/mnt/dbfs”目录下创建挂载点（例如，“/mnt/dbfs/xxxxxx”）。数据库文件存储（DBFS）要求挂载点为空，即“/mnt/dbfs/xxxxxx”目录为空，不能在挂载点下存在文件或者子目录。2.挂载数据库文件存储（DBFS...
一般性问题
数据库文件存储DBFS的挂载点目前固定，位于“/mnt/dbfs”目录下。3.权限组是什么概念、有什么作用？权限组定义了访问数据库文件存储（DBFS）的权限信息，包括读写权限、用户权限等。4.数据库文件存储（DBFS）的后台进程？挂载数据库文件...
元数据性能测试
NNbench的jar包位于${HADOOP_HOME}/share/hadoop/mapreduce目录下，${HADOOP_HOME}为测试机器中的Hadoop 安装目录，NNbench的jar包名为hadoop-mapreduce-client-jobclient-x.x.x-tests.jar，使用方法如下。本文所有命令均在${HADOOP_HOME}/...
管理目录
例如，您希望删除存储空间examplebucket下目录log及该目录下的所有文件，请将示例代码中的Prefix参数指定为 log/。警告 删除目录会同步删除目录下包含的子目录以及所有文件，请谨慎操作。DOCTYPE ...
作业提交示例
Sorrows_of_Young_Werther.txt的文件/从oss地址读取文本文档 val text=sc.textFile("oss:/databricks-demo-hangzhou/demo/The_Sorrows_of_Young_Werther.txt")步骤一：上传示例到OSS 上传OSS目录：自定义OSS存储目录。步骤二：创建项目空间...
使用NAS动态存储卷
如果需要删除文件系统中对应的存储目录，可在StorageClass中配置 archiveOnDelete 为 false。在StatefulSet中使用NAS动态存储卷。使用以下示例创建Service及StatefulSet应用：apiVersion:v1 kind:Service metadata:name:nginx labels:app:...
管理目录
nil { fmt.Println("Error:",err)os.Exit(-1)} objects:=[]string{} for_,object:=range lor.Objects { objects=append(objects,object.Key)}/删除目录及目录下的所有文件。将oss.DeleteObjectsQuiet设置为true，表示不返回删除结果。...
set-meta（管理文件元数据）
示例三：为相同或不同目录下的多个Object设置或更新元数据 不同目录下 当您需要为Bucket中的多个Object设置或更新元数据，这些Object归属于Bucket的不同目录下，例如exampleobject1.jpg位于examplebucket根目录下，exampleobject2.png位于...
在文件存储 HDFS 版上使用Apache HBase
步骤二：配置Apache HBase 将Hadoop中配置的core-site.xml复制到${HBASE_HOME}/conf目录下。cp${HADOOP_HOME}/etc/hadoop/core-site.xml${HBASE_HOME}/conf 配置${HBASE_HOME}/conf/hbase-site.xml。使用分布式模式运行HBase-><name>hbase...
du（获取大小）
du 命令用于获取指定存储空间（Bucket）、文件目录下包含的所有Object的大小。注意事项 要获取当前版本所有Object的大小，您需要具有 oss:ListObjects、oss:ListParts 和 oss:ListMultipartUploads 权限；要获取所有版本Object大小，您需要...
搜索文件
当您向存储空间（Bucket）上传了大量的文件（Object）时，OSS支持通过指定文件名前缀快速搜索并定位目标文件。使用限制 搜索规则 按文件名前缀进行搜索，搜索的字符串区分大小写，并且不能包含正斜线（/）。搜索结果 在某个Bucket根目录或...
设置数据冷热存储策略
目录下的所有文件（包括递归文件）均使用该策略进行存储。HADOOP_HOME/bin/hdfs storagepolicies-setStoragePolicy-path<PATH>-policy参数说明 参数 说明 PATH 目录的路径。POLICY 文件引擎的存储类型。取值：HOT（默认值）：文件存储在您...
OSS与文件系统的对比
虽然您可以使用类似 test1/test.jpg 的名称，但是这并不表示Object是保存在test1目录下。对于OSS来说，test1/test.jpg 仅仅只是一个字符串，与example.jpg并没有本质的区别。因此不同名称的Object之间的访问消耗的资源是类似的。一个名为 ...
通过Hadoop Shell命令访问
如果您希望通过命令行的方式在开通OSS-HDFS...拷贝目录或文件 例如，将examplebucket下根目录subdir1拷贝到目录subdir2下，且根目录subdir1所在的位置、根目录下的文件和子目录结构和内容保持不变，示例如下：hdfs dfs-cp oss:/examplebucket....
列举文件
列举根目录下的Object的版本信息 以下代码用于列举根目录下的Object的版本信息：const OSS=require("ali-oss");const client=new OSS({/yourregion填写Bucket所在地域。以华东1（杭州）为例，Region填写为oss-cn-hangzhou。region:'...
管理测试用例
新建用例 新建用例包含两个场景：已新建目录：将鼠标滑动至 用例列表 中已创建的目录上，从快捷菜单中选择 新建用例 选项，在指定目录下创建用例。未新建目录：在 性能测试 页面，如 用例列表 为空，即初次创建用例，单击 新建用例 按钮；...
- 产品推荐
- 这些文档可能帮助您