工作流概述
触发方式 适用场景 自动触发 文件上传到指定路径后立即按固定流程处理 手动 触发（校验输入路径）历史数据处理，对已存储在OSS的文件按工作流批量处理 文件上传后不需要立刻处理，比如等待有用户访问、播放量较高后再处理 文件需要按业务...
触发工作流
触发方式对比 触发方式 适用场景 自动触发 文件上传到指定路径后立即按固定流程处理 手动 触发（校验输入路径）历史数据处理，对已存储在OSS的文件按工作流批量处理 文件上传后不需要立刻处理，比如等待有用户访问、播放量较高后再处理 ...
批处理
使用批处理对存储空间（Bucket）中存量文件进行批量处理。例如将Bucket某个目录中后缀为.docx的文件转换成PDF格式、将所有MOV格式的文件转码为MP4等。说明 新版数据处理功能API、SDK支持在 IMM服务接入点 中的地域进行使用。注意事项 批...
触发器
和批处理的不同的是，触发器只会对创建触发器之后OSS内新增的文件进行处理，对存量文件则不会处理。说明 新版数据处理功能API、SDK支持在 IMM服务接入点 中的地域进行使用。注意事项 触发器将对满足条件的所有文件生成对应数据处理任务，请...
功能特性
功能集 功能 功能描述 参考文档 文件基础处理 文件压缩 云上资源的压缩功能可以帮助用户高效、便捷地进行云上文件管理，可以根据需要使用该功能对OSS中的文件进行在线压缩，将您的多个文件打包为 zip 等压缩包。压缩解压介绍 压缩 API 文件...
变量
在使用数据处理功能的批处理或触发器功能时，每个Object都会触发一个任务，任务中需要指定处理后的文件保存的输出路径，如果多个任务输出路径是同一个路径，则会产生文件覆盖，因此需要保证输出路径为动态路径，所以引入变量。此外，您可以...
OSS有哪些批量操作？
对象存储OSS提供丰富的访问和管理文件（Object）的方式，为提升操作效率，您可以参照本文所示的方法批量管理文件，例如批量上传、下载、复制、删除文件等。批量上传 您可以使用以下方法，批量上传文件：ossimport工具 支持从服务器本地、第...
UpdateBatch-更新批处理任务
更新批处理任务信息，如输入的数据源配置、数据处理的配置、批处理任务标签等信息。接口说明 更新批处理任务时，当批处理任务状态处于 Ready（就绪）或 Failed（失败）时可以更新，更新时不会改变当前的任务状态。更新完成后，之前未完成的...
媒体处理概述
您可以通过批处理对存量视频文件进行处理。操作方式，请参见 批处理。您可以通过触发器对增量视频文件进行处理。操作方式，请参见 触发器。使用限制 媒体处理支持的格式如下表所示。项目 音频格式 视频格式 输入 wav、pcm、tta、flac、au、...
DeleteBatch-删除批处理任务
删除指定的一个批处理任务。接口说明 删除批处理任务时，当任务状态处于 Ready（就绪），Failed（失败），Suspended（暂停），Succeeded（完成）时可以删除，其他运行中的状态禁止删除。删除批处理任务时，可以先通过 GetBatch 查询批处理...
ResumeBatch-恢复批处理任务
将一个Suspend（暂停）或Failed（失败）的批处理任务恢复。接口说明 只有 Suspended（暂停），Failed（失败）状态的批处理任务可以恢复，恢复后继续执行未完成的任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的...
SuspendBatch-暂停批处理任务
将一个 Running（正在执行）的批处理任务暂停。接口说明 任务状态 Running（正在执行）时，可以暂停任务。如果想继续执行，需要调用 ResumeBatch 接口。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后...
API详情
文件转写API支持批处理，用户单次可以上传最多100个文件URL，待所有URL转写完成后，用户可以一次性获取全部转写结果。说明 若您有合作需求或技术咨询，请 提交工单。模型概览 模型名 模型简介 paraformer-v1 Paraformer中语音模型服务中...
录音文件识别API详情
文件转写API支持批处理，用户可以单次上传最多100个文件URL，待所有URL转写完成后，用户可以一次性获取全部转写结果。模型概览 模型名 模型简介 paraformer-v1 Paraformer中英文语音识别模型，支持16kHz及以上采样率的音频或视频语音识别。...
录音文件识别API详情
文件转写API支持批处理，用户可以单次上传最多100个文件URL，待所有URL转写完成后，用户可以一次性获取全部转写结果。模型概览 模型名 模型简介 paraformer-v1 Paraformer中英文语音识别模型，支持16kHz及以上采样率的音频或视频语音识别。...
人工复核
未处理文件提醒 管理员/质检员 角色账号登录时，如果分配给他们的文件中存在复核状态为 未复核/申诉中 的文件时，在导航栏中会出现一个红色数字角标，表示当前未处理的文件总数。列表功能说明 列表中各列的解释说明、高级搜索框使用说明、...
异步处理
您可以在POSTObject接口中添加处理参数或样式参数的方式来处理文件。更多信息，请参见 图片处理持久化。如下以视频转码处理场景为例。请求示例如下：POST/exmaple.avi?x-oss-async-process ...
样式
根据您需要处理文件的类型，选择 图片处理、文档处理 或 媒体处理 等入口。选择 样式管理 页签，单击 创建样式。在 创建样式 面板，通过图形化方式配置您的样式。单击 确定。使用样式 样式创建完成后，您可以通过对象URL使用样式来处理文件...
快速提交转码任务
前提条件 您已将待处理文件上传至OSS。详细操作，请参见 上传视频。使用流程 登录 媒体处理控制台 并选择服务地域。开启管道。在左侧导航栏，选择 全局设置>管道及回调，找到对应类型管道开启即可。详细操作请参见 创建管道，还可在此绑定...
构建基于Serverless架构的弹性高可用音视频处理系统
在音视频系统中，音视频转码是比较消耗计算力的一个子系统，您可以通过 函数计算 和 Serverless 工作流 构建弹性高可用的Serverless音视频处理系统。本文会从工程效率、运维、性能和成本方面介绍Serverless音视频处理系统和传统方案的差异...
上传代码包到函数计算后文件显示乱码如何处理？
文件名称编码不一致 函数计算 环境中默认使用UTF-8处理文件名，如果原始文件名使用了非UTF-8编码，就会导致乱码，请确保上传的文件名已正确转换为UTF-8编码。压缩过程编码问题 如果您选择上传ZIP包的方式上传代码，可能是压缩过程出现了...
其他问题
为什么Linux无法挂载SMB文件系统？本地电脑或非阿里云主机如何挂载访问阿里云NAS？阿里云无影云桌面如何挂载NAS？阿里云NAS是否支持通过NFS和SMB协议同时挂载一个文件系统？经典网络或者已打通VPC的ECS实例怎么通过控制台挂载文件系统？NAS...
智能生产
参数 说明 待处理文件地址 单击 选择，在 Bucket 下拉列表中，选择Bucket名称。路径 下方会显示对应Bucket已经创建好的文件夹，在文件夹下选择一个文件作为输入路径。智能封面管道 在下拉列表中选择管道名称。说明 如果 智能封面管道 下拉...
智能审核
参数 说明 待处理文件地址 单击 选择，在 Bucket 下拉列表中，选择Bucket名称。路径 下方会显示对应Bucket已经创建好的文件夹，在文件夹下选择一个文件作为输入路径。说明 为OSS Bucket输入存储路径，如果下拉列表中没有Bucket，请先添加...
智能标签
参数 说明 待处理文件地址 单击 选择，在 Bucket 下拉列表中，选择Bucket名称。路径 下方会显示对应Bucket已经创建好的文件夹，在文件夹下选择一个文件作为输入路径。智能标签管道 在下拉列表中选择管道名称。说明 如果智能标签管道下拉...
如何解决备份客户端OOM问题
备份错误处理相关文档 如何处理备份失败问题 如何检查云备份客户端运行状态 如何查看云备份客户端默认安装路径和日志 如何卸载云备份客户端 如何解决备份客户端OOM问题 排查和处理文件备份客户端状态异常 云备份客户端问题诊断工具 安装...
性能优化最佳实践
避免使用小文件 处理小文件并非Hadoop的设计目标，Hadoop分析引擎处理大量小文件的速度远远小于处理同等数据量的大文件的速度。每一个小文件都会占用一个task，而task启动将耗费大量时间，造成作业的大部分时间都耗费在启动task和释放task...
视频DNA
参数 说明 待处理文件地址 单击 选择，在 Bucket 下拉列表中，选择Bucket名称。路径 下方会显示对应Bucket已经创建好的文件夹，在文件夹下选择一个文件作为输入路径。视频DNA管道 在下拉列表中选择管道名称。说明 如果 视频DNA管道 下拉...
文件处理概述
文件处理是由智能媒体管理IMM提供的对多种文件格式进行压缩、解压等操作的处理能力。您可以将原始文件上传到阿里云对象存储OSS，通过OSS的RESTful数据处理接口 x-oss-process 在任何时间、任何地点、任何互联网设备上对文件进行压缩、解压...
新旧版本使用指引
批处理 无 新版支持创建批处理，创建完成后，您可以指定存储内已存在的若干文件，对其批量执行指定操作，如转码、格式转换等。文档转换异步请求 无 DeleteOfficeConversionTask-删除异步文档格式转换任务 新版任务开始执行后，任务信息只...
设置消息通知
输入路径 待处理文件的输入路径。转码管道 选择在上一步中已经绑定的转码管道。消息通知 单击开启消息通知。消息类型 需要接收的消息类型。根据您管道绑定的消息类型选择。队列（通知）名称 选择对应的队列（主题通知）。其余节点具体操作...
错误响应
当您使用文件处理功能出现错误时，会返回相应的错误码和错误信息，帮助您定位与处理问题。错误响应 文件处理功能错误响应的消息体示例如下：<Error><Code>Imm Client</Code><Message>InvalidArgument,The parameter OctreeOption is ...
AddMedia-新增媒体
根据设置的 OSS Bucket，Object 自动匹配处于激活状态的工作流自动执行，因此通常情况下不需要手动调用 AddMedia 接口处理文件。只有指定激活状态的工作流处理媒体文件时，才会自动获取媒体信息；不指定工作流或指定其他状态的工作流时，...
合并小文件
分布式文件系统按块（Block）存放数据，文件大小比块大小（64MB）小的文件称为小文件。分布式系统不可避免会产生小文件，比如SQL或其他分布式引擎的计算结果、Tunnel数据采集。合并小文件可以达到优化系统性能的目的。本文为您介绍如何在...
TensorFlow常见问题
tf.train.shuffle_batch 参数如下：batch_size：批处理大小，即每次运行Batch返回的数据数量。num_threads：运行线程数，一般设置为4。capacity：随机取文件范围。例如，数据集有10000个数据，如果需要从5000个数据中随机抽取，则将...
使用EasyTransfer进行文本分类
无 STRING batchSize 否 训练时的批处理大小。如果是多卡训练，则为每个GPU上的批处理大小。32 INT numEpochs 否 训练总Epoch的数量。1 INT optimizerType 否 优化器类型，取值包括：adam lamb adagrad adadeleta adam STRING learningRate...
概述
物联网平台支持设备通过MQTT协议，将文件上传至用户的OSS空间或者物联网平台文件存储空间，以减少硬件资源的开销，并降低开发成本。本文介绍通过配置C Link SDK，帮助设备实现文件上传功能。前提条件 已获取设备认证信息。已获取C Link SDK...
挂载访问FAQ
本文介绍挂载NAS文件系统的常见问题。如果您有任何反馈或疑问，请单击下方按钮联系NAS技术支持进行咨询。NAS技术支持 通过控制台一键挂载文件系统 一键挂载功能支持哪些操作系统和文件系统协议？经典网络或者已打通VPC的ECS实例怎么通过...
使用函数计算实现网站的文件处理
本文介绍如何通过函数计算实现文件管理网站的功能，例如自动解压文件、自动打包压缩、自动处理图片分辨率等。应用场景 某图片网站数据管理主要提供图片标注服务，有以下需求：上传文件自动更新压缩包。用户特定图片更新并上传文件到OSS的...
使用函数计算实现网站的文件处理
本文介绍如何通过函数计算实现文件管理网站的功能，例如自动解压文件、自动打包压缩、自动处理图片分辨率等。应用场景 某图片网站数据管理主要提供图片标注服务，有以下需求：上传文件自动更新压缩包。用户特定图片更新并上传文件到OSS的...
- 产品推荐
- 这些文档可能帮助您