Parquet
Parquet是Apache开源项目Hadoop支持的一种列存储文件格式，同一份数据以ORC格式和Parquet格式存储时，其数据扫描性能要优于普通文本CSV格式。本文介绍如何在DLA中为Parquet类型的文件创建表。前提条件 请参见文档 文件格式转换，准备...
文件管理最佳实践
文件格式 文件存储服务目前支持上传图片、音频和视频文件。文件格式要求如下表所示。文件类型 文件格式 图片 jpg/jpeg、png、gif、bmp、wbmp、webp、svg 音频 mp3 视频 mp4、ogg、webm 上传文件 以下代码展示了如何通过 uploadFile 方法以...
存储格式与SerDe
DLA内置了处理各类数据文件的Serialize/Deserilize（简称SerDe，用于序列化和反序列化），您无需编写程序，直接选用一款或多款SerDe来匹配OSS上的数据文件格式。通过SerDe，DLA可以对OSS上的多种格式的文件进行查询分析，包括纯文本文件...
概述
文件格式 归档速度 读取速度 是否是开源格式 占用的存储空间 归档后的数据修改方式 IBD 较CSV格式快 说明 支持使用单线程和多线程并行归档两种方式。快 说明 支持使用单线程和多线程两种方式读取数据。否 与InnoDB引擎中的IBD文件占用的...
0053-00000005
问题描述 视频截帧请求访问的目标文件格式不支持。问题原因 您发起了视频截帧请求，但是目标视频文件的格式不符合要求，导致截帧失败。问题示例 无。解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧，请确保您访问的...
文件处理概述
文件处理是由智能媒体管理IMM提供的对多种文件格式进行压缩、解压等操作的处理能力。您可以将原始文件上传到阿里云对象存储OSS，通过OSS的RESTful数据处理接口 x-oss-process 在任何时间、任何地点、任何互联网设备上对文件进行压缩、解压...
0053-00000002
问题描述 视频截帧请求访问的目标视频文件读取失败。...解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧，请确保您访问的目标文件格式正确。如果您仍对视频文件为何读取失败有疑问，请联系 技术支持。相关文档 视频截帧
将表格存储数据下载到本地文件
导出文件格式 操作方式 JSON 通过命令行工具直接下载 CSV 通过DataX工具直接下载 通过DataWorks工具同步数据到OSS后再下载 TEXT 通过DataWorks工具同步数据到OSS后再下载 通过命令行工具直接下载 通过命令行工具导出表中数据到本地JSON文件...
0053-00000003
问题描述 视频截帧请求访问的目标视频文件打开...解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧，请确保您访问的目标文件格式正确。如果您仍对视频文件为何打开视频流失败有疑问，请联系 技术支持。相关文档 视频截帧
0053-00000004
问题描述 视频截帧请求访问的目标文件未找到...解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧，请确保您访问的目标文件格式正确。如果您仍对视频文件为何无法获取视频流有疑问，请联系 技术支持。相关文档 视频截帧
概述
为减轻用户工作量，您可以直接使用DLA来转换文件格式。假设将1.2GB的数据以CSV、TSV或者LOG等格式存储在OSS中，通过DLA将CSV、TSV或者LOG格式转换为其他格式后，数据在OSS中所占用的存储空间如下表所示。存储格式 数据来源及特点 数据量...
手动下载备份集
通过 file<下载任务ID>.tar 命令查看gzip命令执行后的文件格式：如果文件格式为 POSIX tar archive，则执行 tar xvf<下载任务ID>.tar 命令，获得<下载任务ID>文件。如果文件格式为 Zip archive data,at least v2.0 to extract，则执行 ...
文档转换
使用REST API 转换信息 转换前 文档格式：DOCX 文档名称：example.docx 处理方式：文档格式转换 转换后 文件格式：PNG 文件存储路径：oss:/test-bucket/doc_images/转换完成消息通知：发送到主题为 doc_images 的MNS 处理示例/将文件...
上传本地文件
参数 说明 文件格式 默认CSV格式。不可修改。列分隔符 可选：逗号、竖线、空格、制表符、自定义。选择 自定义 时，需输入一个可见字符。自定义存储表 选择当前实例下已创建的自定义存储表。重要 该自定义存储表的表结构必须已完成定义。...
媒资上传概述
支持上传的文件格式 智能媒体服务支持视频、音频、图片和其他辅助媒资（字幕、字体）文件的上传，文件可以为本地文件或线上文件（通过URL拉取或OSS导入），支持的文件类型如下：媒体类型 文件格式 视频 MPEG MP4、TS、3GP、MPG、MPEG、MPE...
文档处理概述
文档快照支持输出的文件格式 支持输出jpg、png格式。计费 使用文档处理服务时，会产生如下费用：文档处理费用：由智能媒体管理（IMM）收取，费用详情请参见 计费项。请求费用：处理文档在线预览、文档在线编辑、文档快照时会产生一次Get...
控制台上传
前提条件 您已经了解支持上传的文件格式，详情请参见 支持上传的文件格式。根据实际媒资需要上传的存储地址，开通对象存储OSS或视频点播VOD服务。具体操作，请参见 开通OSS服务、开通视频点播。您已经添加或设置默认存储地址。具体操作，请...
GetBucketInventory
父节点：Destination Format 字符串 导出清单文件的文件格式。有效值：CSV 父节点：OSSBucketDestination AccountId 字符串 存储空间所有者授予的账户ID。父节点：OSSBucketDestination RoleArn 字符串 存储空间所有者授予操作权限的角色名...
音频转码
使用场景 音乐文件格式转换：用户从网络下载的音乐可能不是其设备或播放器支持的格式，需要转换音频格式才能进行播放。存储空间优化：高品质无损音频（如FLAC）占用大量存储空间，为了在移动设备上节省空间，用户会选择将其转码为有损但...
通过SLS完成日志数据入湖OSS
文件格式为：oss:/OSS-BUCKET/OSS-PREFIX/PARTITION-FORMAT_RANDOM-ID 参数说明如下表所示：参数 说明 示例值 OSS-BUCKET OSS Bucket名称。examplebucket OSS-PREFIX 文件投递目录。exampledir PARTITION-FORMAT 分区格式，通过 strptime ...
PutBucketInventory
父节点：Destination Format 字符串 是 CSV 清单文件的文件格式。清单文件导出后的格式为使用GZIP压缩的CSV文件。有效值：CSV 父节点：OSSBucketDestination AccountId 字符串 是 100000000000000 Bucket所有者授予的账户ID。父节点：...
ListBucketInventory
父节点：Destination Format 字符串 导出清单文件的文件格式。有效值：CSV 父节点：OSSBucketDestination AccountId 字符串 存储空间所有者授予的账户ID。父节点：OSSBucketDestination RoleArn 字符串 存储空间所有者授予操作权限的角色名...
通过控制台投递数据到OSS
投递文件格式 投递的数据以Parquet列存格式存储，数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。Schema生成方式 指定需要投递的数据列，可以选择任意字段以任意顺序、名称写入列存文件，OSS的列存数据会按Schema数组中...
存储空间清单
您可以使用对象存储OSS的清单功能获取存储空间（Bucket）中指定文件（Object）的数量、大小、存储类型、加密状态等信息。相对于GetBucket（ListObjects）接口，在海量Object的列举场景中，建议您优先使用清单功能。警告 为避免影响OSS-HDFS...
添加云产品数据源
CSV：使用CSV文件格式。自定义：使用自定义脚本解析数据格式。行分隔符 可选：系统默认分隔符、逗号、竖线、空格、制表符、自定义。选择 系统默认分隔符 时，会自动匹配使用当前系统的分隔符。选择 自定义 时，需输入一个可见字符。说明 ...
转换文件存储类型
OSS提供标准、低频访问、归档、冷归档和深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。本文主要介绍如何转换文件（Object）的存储类型。注意事项 当您使用webpack或browserify等打包工具时，请通过 npm install ali-oss 的...
OSS下载的RAR文件存在乱码
问题描述 通过OSS下载的RAR格式文件，打开文件后存在乱码。问题原因 Object的文件类型不正确，HTTP头的 Content-Type 参数和实际文件类型参数不匹配。解决方案 修改Object属性中的HTTP表头，将设置中的 Content-Type 值改成 application/x-...
Linux系统挂载SMB协议文件系统
由于Linux系统对SMB协议的兼容程度较低，建议仅在需要跨操作系统共享数据的情况下使用Linux系统挂载SMB协议文件系统。本文主要介绍如何将SMB协议文件系统挂载至云服务器ECS（Linux）上并执行读写操作。前提条件 在创建SMB协议文件系统的...
使用Robocopy工具迁移数据
本文介绍如何使用robocopy工具实现阿里云文件存储NAS SMB协议文件系统之间的数据迁移。前提条件 拥有一个存有数据的SMB协议文件系统，并且拥有一个专有网络类型挂载点。背景信息 Robocopy是Windows系统自带的目录复制命令，该功能可以创建...
查看低频存储文件
在左侧导航栏，选择 生命周期管理>低频存储文件管理。在顶部菜单栏，选择地域。在 低频存储文件管理 页面左侧，选中或搜索目标文件系统。在 低频存储文件管理 页面右侧，查看目标文件系统已转储至低频介质中的文件及该文件最近一次被访问的...
如何扩容云存储文件网关缓存
关于扩容云存储文件网关缓存的具体操作，请参见 云存储文件网关缓存扩容。
另存为
什么是另存为 同步处理默认不保存处理后的文件，您需要在处理请求内添加另存为参数，将处理后的文件作为对象(Object)保存到指定的存储空间(Bucket)内。异步处理由于是以任务形式对文件进行异步数据处理，请求返回时只会返回任务ID，所以...
功能特性
挂载DBFS 卸载DBFS 从ECS云服务器上卸载数据库文件存储 卸载DBFS 扩容DBFS 支持业务友好地在线扩充存储容量 在线扩容 格式化DBFS 格式化数据库文件存储操作会清空已写入的数据，建议操作前创建快照备份数据库文件存储的数据-重命名DBFS ...
新功能发布记录
它基于共享存储架构设计，通过文件协议提供数据库定制功能，具备企业级存储特性。主要服务于云上自建数据库、基于传统存储区域网络（SAN）的应用等，为用户提供低成本、高性能、高可用的存储服务。2020-06-29 华东1（杭州）产品简介
生命周期管理FAQ
第一次读低频介质中存储文件内容时可能延时会相对较高，但同一个文件内容在后续的一定时间内的读延时会与通用性能型NAS、通用高级型NAS或通用容量型NAS普通文件的读延时基本一致。写低频存储文件的延时与写通用性能型NAS、通用高级型NAS或...
API概览
本产品（文件存储（NAS...GetDirectoryOrFileProperties 查询低频介质的文件信息 查询指定目录下是否包含低频存储文件，或者查询指定文件是否为低频存储文件。DescribeLifecyclePolicies 查询生命周期管理策略列表 获取生命周期管理策略列表。...
入门概述
通过NFSv3协议访问CPFS文件系统 协议服务 在服务器中卸载挂载的文件系统 卸载文件系统 删除文件系统 删除文件系统 与对象存储OSS之间实现数据流动 数据流动 监测文件的使用量 数据监控 备份文件系统中的数据 文件存储CPFS（NFS协议）备份 ...
什么是数据库存储DBFS
它基于共享存储架构设计，通过文件协议提供数据库定制功能，具备企业级存储特性。主要服务于云上自建数据库，基于传统SAN的应用等，为用户提供高IO性能和高可用性。同时减少数据库直接基于块的架构复杂度和成本（例如数据库做主备容灾的...
什么是文件存储 HDFS 版
文件存储 HDFS 版（Apsara File Storage for HDFS）是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统（Hadoop Distributed File System）中一样管理和访问数据。您...
数据处理费用
按量付费：归档存储数据取回费用=解冻文件大小（GB）×归档存储文件数据取回单价 资源包：不支持 归档直读数据取回容量（RetrievalDataArchiveDirect）直读归档存储类型文件产生的费用。按直读文件的大小计费。重要 对于已解冻的归档存储...
- 产品推荐
- 这些文档可能帮助您