存储格式与SerDe

DLA内置了处理各类数据文件的Serialize/Deserilize(简称SerDe,用于序列化和反序列化),您...通过 STORED AS 指定文件格式的同时,还可以根据具体文件的特点,指定SerDe和特殊列分隔符等,详细地使用方法将在各类型文件格式示例中为您讲解。

概述

归档为 IBD 格式的技术原理图如下:与归档为CSV和ORC格式的文件不同。该方案是在InnoDB存储引擎下使用OSS,而不用修改表所在的引擎。仅通过归档语句手动将IBD格式文件的存储位置从PolarStore迁移至OSS。归档完成后,PolarStore中的这部分...

常见问题

阿里云ECS云服务使用文件存储的典型应用场景如下:使用SLB+多台ECS(如Web服务器)部署业务,多台ECS需要访问同一个存储空间,以便多台ECS能共享数据。日志共享:多台ECS应用,需要将日志写到同一个存储空间,以方便做集中的日志数据处理...

媒资上传概述

支持上传的文件格式 智能媒体服务支持视频、音频、图片和其他辅助媒资(字幕、字体)文件的上传,文件可以为本地文件或线上文件(通过URL拉取或OSS导入),支持的文件类型如下:媒体类型 文件格式 视频 MPEG MP4、TS、3GP、MPG、MPEG、MPE...

回收站

例如执行 vim 命令编辑文件时,产生的.swp 和.swpx 格式的文件将进入回收站。应用程序自动轮转的日志文件。例如使用Nginx配置了自动轮转日志且最多保留20个日志文件,当日志文件 test.log.19 轮转为日志文件 test.log.20 时,原日志文件 ...

GetBucketInventory

父节点:Destination Format 字符串 导出清单文件的文件格式。有效值:CSV 父节点:OSSBucketDestination AccountId 字符串 存储空间所有者授予的账户ID。父节点:OSSBucketDestination RoleArn 字符串 存储空间所有者授予操作权限的角色名...

cp(拷贝文件

拷贝文件(Object)是指在不改变文件内容的情况下,将同一地域下的源存储空间(Bucket)内的文件复制到目标Bucket,或者将文件复制到相同存储空间(Bucket)的其他目录。您可以通过ossutil的 cp 完成拷贝。注意事项 要拷贝文件,您必须具有...

cp(上传文件

本文涉及的通用示例说明如下:本地文件:examplefile.txt(根目录下的文件)本地文件夹:localfolder(根目录下的文件夹)目标Bucket:examplebucket 目标Bucket指定目录:desfolder 简单上传 当您需要将本地文件、图片、视频等资源上传到...

存储空间清单

您可以选择导出标准存储、低频访问存储、归档存储以及冷归档存储的文件。对象版本 选择清单扫描的文件版本。如果Bucket已开启版本控制,可选择导出目标文件的 当前版本 或 所有版本。更多信息,请参见 版本控制概述。如果Bucket未开启版本...

ListBucketInventory

父节点:Destination Format 字符串 导出清单文件的文件格式。有效值:CSV 父节点:OSSBucketDestination AccountId 字符串 存储空间所有者授予的账户ID。父节点:OSSBucketDestination RoleArn 字符串 存储空间所有者授予操作权限的角色名...

PutBucketInventory

父节点:Destination Format 字符串 是 CSV 清单文件的文件格式。清单文件导出后的格式为使用GZIP压缩的CSV文件。有效值:CSV 父节点:OSSBucketDestination AccountId 字符串 是 100000000000000 Bucket所有者授予的账户ID。父节点:...

查看选项

例如*.txt 表示列举所有格式不为TXT的文件。更多信息,请参见 include和exclude选项。r,-recursive 递归操作。当指定该选项时,ossutil会对Bucket下所有符合条件的Object进行操作,否则只对URL中指定的单个Object进行操作。addr 增加此项...

0053-00000005

问题描述 视频截帧请求访问的目标文件格式不支持。问题原因 您发起了视频截帧请求,但是目标视频文件的格式不符合要求,导致截帧失败。问题示例 无。解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧,请确保您访问的...

文档处理常见问题

传入 Filename 参数时根据 Filename 后缀判断文件格式,不传 Filename 参数时根据OSS文档的后缀判断文件格式。OSS Bucket设置了防盗链,文档可以预览吗?OSS Bucket设置了防盗链,在调用GenerateWebofficeToken接口获取Weboffice凭证时传入...

restore(解冻文件

使用该选项的步骤如下:您需要指定.txt或者XML格式的本地文件,并在本地文件中换行填写所有待解冻的Object。ossutil读取本地文件中的所有Object,然后对这些Object进行批量解冻。说明 当其中一个Object操作出现错误时,ossutil会将该Object...

查看选项

passwd_file 用于指定保存存储空间访问密钥的文件,默认为/etc/passwd-ossfs。connect_timeout 指定连接的超时时间,单位为秒,默认值为300秒。readwrite_timeout 指定读或者写请求的超时时间,单位为秒,默认值为60秒。max_stat_cache_...

另存为

什么是另存为 同步处理默认不保存处理后的文件,您需要在处理请求内添加另存为参数,将处理后的文件作为对象(Object)保存到指定的存储空间(Bucket)内。异步处理由于是以任务形式对文件进行异步数据处理,请求返回时只会返回任务ID,所以...

管道

action2:sys/saveas,b_dGVzdC1idWNrZXQ,o_ZG9jX2ltYWdlcy97aW5kZXh9LnBuZw/notify,topic_ZG9jX2ltYWdlcw,表示将转换完成的图片文件存储到 oss:/test-bucket/doc_images/路径中,并在转换完成后将通知发送到 doc_images 的MNS主题。

消息通知

x-oss-async-process HTTP/1.1 Host: doc-demo.oss-cn-hangzhou.aliyuncs.com Date: Fri,28 Oct 2022 06:40:10 GMT Authorization:OSS qn6qrrqxo2oawuk53otf*:UNQDb7GapEgJkcde6OhZ9J*/将类型为DOCX的文件example.docx转换为PNG格式的图片...

set-meta(管理文件元数据)

使用该选项的步骤如下:您需要指定.txt或者XML格式的本地文件,并在本地文件中换行填写所有待设置、更新或删除元数据的Object。ossutil读取本地文件中的所有Object,然后对这些Object进行元数据的设置、更新或删除操作。说明 当其中一个...

将表格存储数据下载到本地文件

导出文件格式 操作方式 JSON 通过命令行工具直接下载 CSV 通过DataX工具直接下载 通过DataWorks工具同步数据到OSS后再下载 TEXT 通过DataWorks工具同步数据到OSS后再下载 通过命令行工具直接下载 通过命令行工具导出表中数据到本地JSON文件...

存储空间概览

文件碎片:统计当前存储空间内存储的文件碎片数量。文件碎片主要由分片上传和断点续传上传产生。请结合生命周期规则删除不再需要的文件碎片,以免产生不必要的费用。更多信息,请参见 设置生命周期规则。访问域名 在访问域名区域,您可以...

导入OSS数据

ORC:ORC文件格式,无需任何配置,自动解析成日志格式。Parquet:Parquet格式,无需任何配置,自动解析成日志格式。阿里云OSS访问日志:阿里云OSS访问日志格式。更多信息,请参见 日志转存。阿里云CDN下载日志:阿里云CDN下载日志格式。更...

导入Amazon S3文件

时间格式的语法详情,请参见 Class SimpleDateFormat。常见的时间格式,请参见 时间格式。支持epoch格式,包括epoch、epochMillis、epochMicro和epochNano。时间字段分区 选择时间字段对应的时区。当时间字段格式为epoch类别时,不需要设置...

哪些是常用的资源包

OSS常用的资源包包括存储包以及下行流量包。...下行流量包 当您通过公网访问或者下载Bucket中存储的文件时,还会产生外网流出流量,您可以购买下行流量包用于抵扣外网流出流量费用。关于下行流量包的抵扣说明,请参见 流量费用。

临时存储费用

冷归档或者深度冷归档存储类型文件(Object)在数据解冻时会生成一份标准存储类型的文件副本用于访问,文件副本在解冻时间结束前会收取临时存储费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情,请参见 OSS产品定价。...

创建文件系统实例后,为什么无法访问文件存储 HDFS 版...

本文介绍了在创建文件系统实例后无法访问 文件存储 HDFS 版 的排查方法。您可以请根据以下几种情况进行排查:确认访问 文件存储 HDFS 版 服务的ECS实例对应的专有网络及虚拟交换机ID,与挂载点的专有网络及虚拟交换机ID是否一致。确认挂载...

创建数据取回任务

如果您需要频繁访问低频介质中存储的文件,建议您创建数据取回任务,将指定文件或目录中的数据取回至通用型NAS存储空间,避免频繁访问产生读写流量费用。本文介绍如何创建数据取回任务。计费说明 在执行数据取回任务时,NAS会根据目标文件...

挂载文件存储 HDFS 版文件系统

确认不再使用 文件存储 HDFS 版 文件系统后,您需要参考 挂载文件系统 中的内容,删除所有已部署 文件存储 HDFS 版 Java SDK和所有core-site.xml文件中 文件存储 HDFS 版 相关配置,完成卸载文件系统。如果您想释放 文件存储 HDFS 版 ...

低频介质

阿里云文件存储NAS推出的通用型NAS低频介质,可以帮助您将低频访问的文件转换到低频介质存储空间,并采用低频介质计费方式,从而减少文件系统的存储费用。如果您存储在通用型NAS文件系统中...安全服务扫描低频介质中存储的文件时,怎么收费?

什么是文件存储 HDFS 版

文件存储 HDFS 版(Apsara File Storage for HDFS)是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统(Hadoop Distributed File System)中一样管理和访问数据。您...

快速入门

文件存储 HDFS 版 是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。文件存储 HDFS 版 兼容了标准的HadoopFS协议接口,使您无需对现有大数据分析应用做任何修改,即可使用具备无限容量及性能扩展、单一命名空间、高可靠和高可用的...

文件网关支持的OSS Bucket类型说明

设置修改时间会被转换成修改存储桶里的对象的元数据,通过调用拷贝对象API来实现,如果是归档类型或者冷归档类型的文件,就会需要执行耗时的解冻动作,影响上传效率,甚至可能因为缓存盘内的数据来不及上传导致写入失败,所以不建议网关...

0053-00000002

问题描述 视频截帧请求访问的目标视频文件读取失败。...解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧,请确保您访问的目标文件格式正确。如果您仍对视频文件为何读取失败有疑问,请联系 技术支持。相关文档 视频截帧

0053-00000004

问题描述 视频截帧请求访问的目标文件未找到...解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧,请确保您访问的目标文件格式正确。如果您仍对视频文件为何无法获取视频流有疑问,请联系 技术支持。相关文档 视频截帧

0053-00000003

问题描述 视频截帧请求访问的目标视频文件打开...解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧,请确保您访问的目标文件格式正确。如果您仍对视频文件为何打开视频流失败有疑问,请联系 技术支持。相关文档 视频截帧

存储费用

当您在OSS内存储文件时,OSS会根据您存储的文件类型、大小和时长收取一定的存储费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情,请参见 OSS产品定价。计费项 计费项 计费规则 计费周期 付费方式 标准存储(本地冗余)...

0016-00000330

问题描述 无法读取CopyObject请求中指定拷贝的源文件。问题原因 您发送了CopyObject请求,但是请求中用于指定拷贝源文件地址的x-oss-copy-source请求头指向的源文件处于不可读取状态。例如,源文件存储类型为归档类型。问题示例 以下...

入门概述

文件存储NAS概述 阿里云文件存储NAS(Apsara File Storage NAS)是面向阿里云ECS实例、E-HPC、容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS兼容了POSIX文件接口,可支持数千台...

sync(在OSS之间同步文件

您可以使用 sync 命令将同一个地域下某个存储空间(Bucket)中某个文件夹下的文件(Object)批量同步到另一个Bucket。注意事项 要在OSS之间同步文件,您必须具有 oss:GetObject、oss:ListObjects、oss:PutObject 和 oss:DeleteObject 权限...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储HDFS版 文件存储 CPFS 数据库文件存储 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用