使用函数计算实现多个文件的打包下载

在 start-zip-oss 目录下创建一个文件夹用于存放压缩的文件,本文以 tmp 文件夹为例。执行的curl命令示例如下:说明 请将命令示例中的访问地址更新为您部署应用成功后返回的公网访问地址 system_url。curl-v-L-o/tmp/my.zip-d@./event.json...

点播资源迁移

自行下载文件搭建上传服务上传 当您的服务地域不支持使用URL批量拉取方式上传或您对上传实时性要求较高时,您可以自行下载文件并使用视频点播提供的上传SDK进行上传。如果您把上传服务部署在ECS上,根据您的ECS地域的不同可以选择内网上...

管理挂载点

在开启IPv6功能前,您还需要为目标文件系统搭建IPv6专有网络。具体操作,请参见 搭建IPv6专有网络。参数 说明 VPC网络 选择已创建的VPC网络。如果还未创建,请前往 VPC控制台 创建。必须与云服务器ECS选择一样的VPC网络。如果是不同的VPC,...

最佳实践

容器与云原生 如何利用云存储网关作为Windows Docker存储访问OSS 在Linux Docker容器中挂载使用云存储网关 Windows应用 利用云存储网关搭建Windows文件共享服务器 利用云存储网关的SMB共享搭建windows FTP服务器访问对象存储OSS 如何基于云...

如何使用Excel导入模块

操作步骤 本文操作步骤使用Excel导入模块,搭建一个文件上传并解析的演示示例应用,此应用支持在页面首页上传Excel文件,并存储在后台,在列表页解析并展示文件内容。步骤一、创建实体 登录 魔笔。在顶部菜单栏选择 应用管理,在右上角搜索...

远程文件系统

远程Linux文件系统 实现远程Linux文件共享,需要先在Linux系统中搭建NFS文件系统。创建NFS文件系统,此处以CentOS7系统为例。安装NFS文件系统。yum install-y nfs-utils 修改/etc/exports文件。data*(rw,no_root_squash)启动NFS文件系统。...

远程文件系统

远程Linux文件系统 实现远程Linux文件共享,需要先在Linux系统中搭建NFS文件系统。创建NFS文件系统,此处以CentOS7系统为例。安装NFS文件系统。yum install-y nfs-utils 修改/etc/exports文件。data*(rw,no_root_squash)启动NFS文件系统。...

HDFS常见命令介绍

hadoop fs-cp/dir/sub-dir/hello_world.txt/tmp 您可以通过 hadoop fs-ls/tmp 命令查看文件复制的情况。mv 在HDFS系统中,移动文件或目录到目标路径,并且不保留源文件内容或目录结构。此命令允许有多个源路径,此时目标路径必须是一个目录...

常见问题

alluxio fs copyFromLocal hello.txt/dir/tmp-Dalluxio.user.file.writetype.default=CACHE_THROUGH 说明 代码中的 hello.txt 为您本地的文件,/dir/tmp 为Alluxio文件系统中的目录。copyFromLocal 命令的用法,请参见 常见命令。Spark作业...

通过Jindo CLI命令访问OSS/OSS-HDFS

下载文件 将examplebucket下的exampleobject.txt下载到本地根目录文件夹/tmp,访问OSS-HDFS示例如下:jindo fs-get oss:/examplebucket.cn-shanghai.oss-dls.aliyuncs.com/exampleobject.txt /tmp/删除目录或文件 删除examplebucket下...

通过Hadoop Shell命令访问

将examplebucket下的exampleobject.txt下载到本地根目录文件夹/tmp,示例如下:hdfs dfs-get oss:/examplebucket.cn-hangzhou.oss-dls.aliyuncs.com/exampleobject.txt /tmp/删除目录或文件 删除examplebucket下 destfolder/目录及其目录下...

通过Jindo CLI访问

下载文件 将examplebucket下的exampleobject.txt下载到本地根目录文件夹/tmp。jindo fs-get oss:/examplebucket.cn-shanghai.oss-dls.aliyuncs.com/exampleobject.txt /tmp/删除目录或文件 删除examplebucket下destfolder/目录及其目录下的...

通过Hadoop Shell命令访问OSS/OSS-HDFS

将examplebucket下的exampleobject.txt下载到本地根目录文件夹/tmp,访问OSS-HDFS示例如下:hadoop fs-get oss:/examplebucket.cn-shanghai.oss-dls.aliyuncs.com/exampleobject.txt /tmp/删除目录或文件 删除examplebucket下destfolder/...

EMR集群接入OSS-HDFS服务快速入门

将examplebucket下的exampleobject.txt下载到本地根目录文件夹/tmp,示例如下:hdfs dfs-get oss:/examplebucket.cn-hangzhou.oss-dls.aliyuncs.com/exampleobject.txt /tmp/删除目录或文件 删除examplebucket下 destfolder/目录及其目录下...

使用ossfs上传大文件时提示“There is no enough disk...

ossfs在上传文件时会写一些临时缓存文件到/tmp 目录下,在写这些文件之前需要先判断/tmp 目录所在的磁盘可用空间是否小于您上传的文件总量,若判断磁盘可用空间小于您上传文件总量,就会出现本地磁盘可用空间不足的报错。以下场景会导致...

Jindo DistCp使用说明

例如,您可以执行以下命令,将/opt/tmp 下的文件拷贝到OSS Bucket。jindo distcp-src/opt/tmp-dest oss:/<yourBucketName>/tmp 说明 本文示例中的 yourBucketName 是您OSS Bucket的名称。parallelism-parallelism 用于指定MapReduce作业里...

Jindo DistCp使用说明

例如,您可以执行以下命令,将/opt/tmp 下的文件拷贝到OSS Bucket。jindo distcp-src/opt/tmp-dest oss:/<yourBucketName>/tmp 说明 本文示例中的 yourBucketName 是您OSS Bucket的名称。parallelism-parallelism 用于指定MapReduce作业里...

Jindo DistCp使用说明

例如,您可以执行以下命令,将/opt/tmp 下的文件拷贝到OSS Bucket。jindo distcp-src/opt/tmp-dest oss:/<yourBucketName>/tmp 说明 本文示例中的 yourBucketName 是您OSS Bucket的名称。parallelism-parallelism 用于指定MapReduce作业里...

Jindo DistCp使用说明

例如,您可以执行以下命令,将/opt/tmp 下的文件拷贝到OSS Bucket。jindo distcp-src/opt/tmp-dest oss:/<yourBucketName>/tmp 说明 本文示例中的 yourBucketName 是您OSS Bucket的名称。parallelism-parallelism 用于指定MapReduce作业里...

Jindo DistCp使用说明

例如,您可以执行以下命令,将/opt/tmp 下的文件拷贝到OSS Bucket。jindo distcp-src/opt/tmp-dest oss:/<yourBucketName>/tmp 说明 本文示例中的 yourBucketName 是您OSS Bucket的名称。parallelism-parallelism 用于指定MapReduce作业里...

Jindo DistCp使用说明

例如,您可以执行以下命令,将/opt/tmp 下的文件拷贝到OSS Bucket。jindo distcp-src/opt/tmp-dest oss:/<yourBucketName>/tmp 说明 本文示例中的 yourBucketName 是您OSS Bucket的名称。parallelism-parallelism 用于指定MapReduce作业里...

Jindo DistCp使用说明

例如,您可以执行以下命令,将/opt/tmp 下的文件拷贝到OSS Bucket。jindo distcp-src/opt/tmp-dest oss:/<yourBucketName>/tmp 说明 本文示例中的 yourBucketName 是您OSS Bucket的名称。parallelism-parallelism 用于指定MapReduce作业里...

Jindo DistCp使用说明

例如,您可以执行以下命令,将/opt/tmp 下的文件拷贝到OSS Bucket。jindo distcp-src/opt/tmp-dest oss:/<yourBucketName>/tmp 说明 本文示例中的 yourBucketName 是您OSS Bucket的名称。parallelism-parallelism 用于指定MapReduce作业里...

Jindo DistCp使用说明

例如,您可以执行以下命令,将/opt/tmp 下的文件拷贝到OSS Bucket。jindo distcp-src/opt/tmp-dest oss:/<yourBucketName>/tmp 说明 本文示例中的 yourBucketName 是您OSS Bucket的名称。parallelism-parallelism 用于指定MapReduce作业里...

Jindo DistCp使用说明

例如,您可以执行以下命令,将/opt/tmp 下的文件拷贝到OSS Bucket。jindo distcp-src/opt/tmp-dest oss:/<yourBucketName>/tmp 说明 本文示例中的 yourBucketName 是您OSS Bucket的名称。parallelism-parallelism 用于指定MapReduce作业里...

MySQL备份恢复迁移

概述 本文主要介绍使用阿里云ECS实例搭建MySQL时,备份恢复迁移相关的思路以及方法。详细信息 重要 阿里云提醒您:如果您对实例或数据有修改、变更等风险操作,务必注意实例的容灾、容错能力,确保数据安全。如果您对实例(包括但不限于ECS...

非EMR集群接入OSS-HDFS服务快速入门

OSS-HDFS服务(JindoFS服务)完全兼容HDFS...拷贝目录或文件 例如,将examplebucket下根目录subdir1拷贝到目录subdir2下,且根目录subdir1所在的位置、根目录下的文件和子目录结构和内容保持不变,示例如下:hdfs dfs-cp oss:/examplebucket....

Hadoop使用JindoSDK访问OSS-HDFS服务

admin操作时完成目录授权sudo chown-R admin:admin/opt/module/hadoop-3.3.1-><value>/opt/module/hadoop-3.3.1/data/tmp</value></property>更新配置文件 hdfs-site.xml 并添加属性。指定HDFS副本的数量。name>dfs....

常见问题

上传时,ossfs会将临时缓存文件写入/tmp 目录下,写入前需要先判断/tmp 目录所在的磁盘可用空间是否小于 multipart_size*parallel_count。如果磁盘可用空间大于 multipart_size*parallel_count,则正常写入文件。如果磁盘可用空间小于 ...

什么是云存储网关CSG

应用场景 文件网关 在本地存储有限的情况下搭建一个海量文件系统的文件存储服务。将数据以对象形式存储在云端,但希望应用仍然以文件系统的方式访问文件而不需修改代码。在多个数据中心,通过文件存储服务的方式访问共享文件夹。块网关 ...

文件存储 HDFS 版上使用Presto

本文主要介绍如何在 文件存储 HDFS 版 上搭建及使用Presto。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已搭建Hadoop集群并且所有集群节点已安装JDK,JDK版本不低于1.8...

MySQL存储计算分离实践

本文主要说明如何基于阿里云数据库文件存储DBFS搭建MySQL数据库。背景信息 云上自建数据库通常会选用云盘和ext4文件系统作为MySQL数据库的文件存储。而基于DBFS构建,不但简化了用户基于块存储架构的复杂度,而且面向数据库场景,提供了...

使用Spark访问

本文介绍在文件引擎上搭建及使用Apache Spark的方法。运行环境准备 开通文件引擎,详情请参见 开通指南。在计算节点上安装JDK,版本不能低于1.8。在计算节点上安装Scala。Scala下载地址:官方链接,其版本要与使用的Apache Spark版本相兼容...

Flink Python作业快速入门

本示例中的数据输出文件目录为 oss:/flink-test-oss/artifacts/namespaces/flink-test-default/batch-quickstart-test-output.txt/,该目录下的文件夹名称是作业的启动日期和时间,单击文件夹查看作业结果文件。单击目标文件名后,在弹出的...

函数计算挂载文件系统

通过在函数计算配置NAS文件系统,函数能够以类似于访问本地文件系统的方式操作NAS文件,实现文件持久化存储。该方式不仅可以消除本地磁盘空间的限制,还允许不同的函数实例共享文件数据。本文介绍如何为函数配置NAS。前提条件 已创建NAS...

迁移数据至阿里云NAS

配置数据传输中转节点后,您还要使用迁移工具迁移数据至阿里云文件存储NAS。本文介绍如何通过迁移工具将非阿里云的数据迁移至文件存储NAS。前提条件 已配置数据传输中转节点ECS实例。具体操作,请参见 配置数据传输中转节点。使用SFTP客户...

搭建Hadoop环境

本文介绍如何在Linux操作系统的ECS实例上快速搭建Hadoop分布式环境。前提条件 搭建Hadoop环境时,已有的ECS实例必须满足以下条件:公网IP:实例已分配公网IP地址或绑定弹性公网IP(EIP)。操作系统:Linux操作系统。实例安全组的入方向规则...

使用Presto访问

准备工作 搭建和使用Presto读写文件引擎,需要先完成以下准备工作。开通文件引擎,详情请参见 开通指南。在计算节点上安装JDK,版本不能低于1.8。在Hadoop集群中安装Apache Hive,详情请参见 使用Hive访问。下载Presto压缩包和presto-cli-...

搭建本地微服务应用环境

mvn package-DskipTests 编译成功后可以看到如下图所示结果:创建云资源 创建VPC,具体操作,请参见 搭建IPv4专有网络。在创建的VPC内购买3台云服务器ECS,具体操作,请参见 通过控制台使用ECS实例(快捷版)云服务器ECS快速入门。给ECS...

从OSS迁移数据

本章节介绍如何将对象存储OSS上的数据迁移到文件引擎。准备工作 开通文件引擎,详情请参见 开通指南。搭建Hadoop集群。建议您使用的Hadoop版本不低于2.7.3,本文档中使用的Hadoop版本为Apache Hadoop 2.7.3,修改Hadoop 配置信息,详情参见...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储HDFS版 数据库文件存储 文件存储 CPFS 轻量应用服务器 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用