变量
在使用数据处理功能的批处理或触发器功能时，每个Object都会触发一个任务，任务中需要指定处理后的文件保存的输出路径，如果多个任务输出路径是同一个路径，则会产生文件覆盖，因此需要保证输出路径为动态路径，所以引入变量。此外，您可以...
批处理
使用批处理对存储空间（Bucket）中存量文件进行批量处理。例如将Bucket某个目录中后缀为.docx的文件转换成PDF格式、将所有MOV格式的文件转码为MP4等。说明 新版数据处理功能API、SDK支持在 IMM服务接入点 中的地域进行使用。注意事项 批...
2024年
修复数据处理场景中存储引擎处理特定数据时会触发 negative bitmapset member not allowed 报错信息，导致执行引擎异常崩溃的问题。修复数据处理过程中系统在尝试读取数据文件的特定块时发生错误，触发 beam could not read block in file ...
常见问题
工具常见问题 ossbrowser常见问题 ossutil常见问题 ossimport常见问题 ossfs常见问题 ossftp常见问题 SDK常见问题 Java Java SDK常见问题 使用OSS Java SDK时报“Connection to XXXX refused”错误 使用OSS Java SDK实现超时以及重传的代码...
挂载访问FAQ
本文介绍挂载NAS文件系统的常见问题。如果您有任何反馈或疑问，请单击下方按钮联系NAS技术支持进行咨询。NAS技术支持 通过控制台一键挂载文件系统 一键挂载功能支持哪些操作系统和文件系统协议？经典网络或者已打通VPC的ECS实例怎么通过...
TensorFlow常见问题
tf.train.shuffle_batch 参数如下：batch_size：批处理大小，即每次运行Batch返回的数据数量。num_threads：运行线程数，一般设置为4。capacity：随机取文件范围。例如，数据集有10000个数据，如果需要从5000个数据中随机抽取，则将...
错误响应
当您使用文件处理功能出现错误时，会返回相应的错误码和错误信息，帮助您定位与处理问题。错误响应 文件处理功能错误响应的消息体示例如下：<Error><Code>Imm Client</Code><Message>InvalidArgument,The parameter OctreeOption is ...
OSS性能与扩展性最佳实践
如果您在上传大量文件（Object）时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间（Bucket）中的某个特定分区的情况。此时如果您的请求次数过多，会导致请求速率下降。出现此类问题时，建议您...
Logtail
警告 如果日志文件为其它编码格式则会出现乱码、数据丢失等问题。日志文件大小 无限制。日志文件轮转 日志轮转队列大小默认为20。您可通过启动参数 logreader_max_rotate_queue_size 进行调整。具体操作，请参见 设置Logtail启动参数。支持...
其他问题
问题现象 通过NFSv4.0协议挂载NAS文件系统后，会有一个 0.0.0.0 的随机端口被监听，并且无法通过netstat定位该监听端口的进程。由于被监听的端口不固定，并且无法定位监听进程，很容易被误判为文件传输受到木马攻击。问题原因 此随机端口是...
Logtail限制说明
警告 如果日志文件为其它编码格式则会出现乱码、数据丢失等问题。日志文件大小 无限制。日志文件轮转 日志轮转队列大小默认为20。您可通过启动参数 logreader_max_rotate_queue_size 进行调整。具体操作，请参见 设置Logtail启动参数。支持...
查看和处理安全告警
查看和恢复隔离文件 云安全中心可对检测到的威胁文件进行隔离处理，被成功隔离的文件会添加到文件隔离箱中，云安全中心将在隔离30天后自动清除被隔离文件。如果您确定被隔离的文件无安全风险，您可以在文件被隔离后30天内，一键恢复被隔离...
工作流常见问题
本文介绍了在使用工作流中出现的常见问题以及解决的对应方法。如何上传文件？您可以通过媒体处理控制台或OSS官方提供的图形化管理工具进行文件上传工作，支持分片上传、断点续传、批量上传。详细信息参见 控制台上传、OSS图形化管理工具...
ZIP包解压
文件或文件夹命名限制：建议使用UTF-8或GB 2312编码命名您的文件或文件夹，否则可能会出现解压后的文件或文件夹名称出现乱码、解压过程中断等问题。压缩包限制：ZIP压缩包中单个文件的大小不超过1 GB，解压单个压缩包默认的最大时间是2小时...
转码常见问题
确认转码源文件能否在本地正常播放（非常重要），经统计大部分转码失败是因为源文件本身有问题（如：视频流缺失、metadata存在问题、帧错误、视频头部信息缺失等），会触发转码效率监控，导致转码退出。使用 ffprobe-show_streams-show_...
查询日志
注意 如果您的业务侧出现问题，建议优先查看主日志和 集群监控，排除集群自身的性能瓶颈或管道配置问题。慢日志 耗时比较久的管道事件日志。当管道运行耗时超过指定阈值时，将在慢查询日志中打印相关信息。注意 为了方便后续排查与定位阿里...
JindoData版本说明
JindoFS修复服务端授权错误时，访问OSS会导致服务异常的问题。JindoFSx存储加速系统 JindoFSx修复Storage服务文件句柄泄漏问题。JindoFSx修复客户端metrics上报线程安全问题。JindoFSx优化递归创建父目录性能。JindoFSx优化路径改写功能...
处理挖矿程序最佳实践
开启恶意主机行为防御的操作入口如下所示：下图是被云安全中心自动拦截的挖矿程序告警详情页：提升主机安全性 重装系统：服务器被挖矿后，由于系统可能存在遗留的安全威胁，往往系统文件会被更改和替换，此时系统已经变得不可信，最好的...
功能特性
图片处理 ZIP包解压 当您需要批量上传文件、按特定目录结构上传文件、上传完整的文件或对文件快速进行资源分发时，可以配置解压规则，上传ZIP文件到OSS指定路径，触发函数计算自动解压，并将解压后内容保存回OSS。ZIP包解压 智能媒体 OSS与...
云虚拟主机木马查杀服务介绍及常见问题
更新时间：最后一次扫描到该恶意文件的时间，若未处理问题会持续更新。木马类型：目前可识别两类恶意文件（Webshell后门文件和挂马文件）。状态：待处理：该文件还未处理，您可以对此高危文件进行一键隔离或者忽略。已隔离：文件处于隔离...
阿里云Elasticsearch实例FAQ
本文列举了阿里云Elasticsearch（ES）相关的常见问题，包括购买、退订、配置、访问、查询、写入、插件、分词、日志、重启、负载或状态异常、备份与恢复、监控报警等相关问题。常见问题概览 购买或退订实例问题 购买ES实例时选错配置，如何...
Logview诊断实践
计算方面：ODPS处理单个大文件比处理多个小文件效率高，小文件过多会影响整体的计算执行性能。因此，为了避免系统产生过多小文件，SQL作业在结束时会针对一定条件自动触发合并小文件的操作。解决措施：通过Logview可以查看作业是否触发了...
媒体上传概述
说明 上传到点播存储的音视频文件会默认提取Meta信息（如视频分辨率、时长、码率等），对视频也会默认截取封面图，且这部分预处理完全免费。媒体处理 音视频播放 用户上传音视频完成后，并不代表音视频已准备就绪，还需点播服务端确认接收...
网站管理常见问题
本文汇总了使用FTP客户端连接云虚拟主机以及上传网站文件后出现的常见问题。权限问题：Linux操作系统云虚拟主机的目录用途是什么？通过Web方式上传文件的大小限制是多少？为什么通过FTP客户端无法修改Windows操作系统云虚拟主机的文件权限...
使用ACK Net Exporter定位网络问题
根据长期处理网络问题中的经验，我们归纳了几种常见的网络疑难问题。这些问题往往在集群中难以无法复现，以偶然发生的方式干扰正常的业务，缺乏有效的定位手段，其中部分如下：网络数据报文被丢弃引发的连接失败，响应超时等问题。网络数据...
通过配置文件管理管道
Logstash通过管道完成数据的采集与处理，管道配置中包含input、output和filter（可选）插件，input和output用来配置输入和输出数据源、filter用来对数据进行过滤或预处理。阿里云Logstash支持多管道并行运行，目前最多支持20个。本文介绍...
MaxCompute UDF（Java）常见问题
Java沙箱限制问题 问题现象：调用MaxCompute UDF访问本地文件、外网或分布式文件系统，创建Java线程等时，代码运行会报错。产生原因：网络限制问题，MaxCompute UDF默认不支持访问网络。解决措施：请根据业务情况填写并提交 网络连接申请...
Logstash数据写入问题排查方案
在使用阿里云Logstash将数据写入阿里云Elasticsearch（output指定为阿里云Elasticsearch）时，您可能会遇到网络不通、管道配置错误、负载高、管道正常启动但无数据写入目标端以及服务正常但缺少数据等问题，此时您可以参考本文的排查方案...
在线预览.txt文件出现乱码问题怎么办？
本文介绍通过OSS控制台在线预览.txt文件出现乱码问题的原因及解决方法。问题原因 文件错误编码。解决方法 登录 OSS管理控制台。单击 Bucket 列表，然后单击目标Bucket名称。在左侧导航栏，选择 文件管理>文件列表。在目标Object右侧选择>...
MaxCompute UDF（Python）常见问题
本文为您介绍使用Python语言编写的MaxCompute UDF的常见问题。类或资源问题 调用MaxCompute UDF运行代码时的常见类或资源问题如下：问题现象一：运行报错描述为 function 'xxx' cannot be resolved。产生原因：原因一：调用MaxCompute UDF...
漏洞管理常见问题
Red Hat 5、Red Hat 6、Red Hat 7、Red Hat 8 CentOS 5 Ubuntu 12 Debian8、9、10 服务器磁盘空间过小、文件权限设置等问题都可能会导致Linux软件漏洞修复失败。您需要先在服务器中手动处理以上问题，才能在云安全中心控制台上修复该服务器...
如何处理备份失败问题
在使用 云备份 服务备份ECS、文件存储NAS、对象存储OSS或自建机房内的文件、数据库、虚拟机、或NAS等数据源时，可能会出现备份失败的问题。本文介绍备份失败处理操作指导。步骤一：判断是否有安装客户端 无需安装客户端的数据源 对于阿里云...
数据导入常见问题
StarRocks集群在接收到第一个请求后，已经开始操作Stream Load，但是由于没有及时向客户端返回结果，会出现客户端再次重试发送相同请求的情况。这时候 StarRocks集群由于已经在操作第一个请求，所以第二个请求会返回 Label Already Exists ...
OSS文件上传和下载失败的排查方法
OSS文件上传回调过程中的常见错误及分析处理 上传或下载OSS文件时提示“OSS Transfer Acceleration is not configured on this bucket”错误 OSS文件下载失败 当下载文件失败时，请参见以下操作进行排查处理：检查本地与OSS的网络是否存在...
常见问题
本文介绍使用云安全中心时可能遇到的问题及其解决方案。新功能动态 功能发布记录 售前常见问题 免费试用相关问题 我已经免费试用过旗舰版，是否可以再次申请免费试用？如何免费试用云安全中心？开启免费试用后，如何开启应用漏洞检测？云...
参数详情
本文介绍媒体处理中转码、工作流、管道等功能API的部分参数详细说明，包含参数类型、参数用途以及参数取值示例等内容。Input详情 本参数被 SubmitJobs-提交转码作业 引用。参数 类型 是否必选 描述 Bucket String 是 输入文件所在OSS ...
查看集群日报与分析
在具体问题中会告知您出现问题的目录位置以及处理方式，您可以进行对应处理。HDFS基础信息 在HDFS基础信息中，您可以获取以下图表信息：存储量趋势图 文件数趋势图 HDFS存储评分趋势图 文件总数，总存储量，小文件、极小文件个数，冷数据...
路由到对象存储OSS
脏数据处理问题：如果在任务的自定义分区或文件内容中配置了JsonPath，但数据未命中JsonPath规则，Connector会将这类数据按攒批策略投递到Bucket下的invalidRuleData/路径。如发现Bucket下有此目录，请检查JsonPath规则的正确性，且避免...
创建OSS Sink Connector（新版）
脏数据处理问题：如果在任务的自定义分区或文件内容中配置了JsonPath，但数据未命中JsonPath规则，Connector会将这类数据按攒批策略投递到Bucket下的invalidRuleData/路径。如发现Bucket下有此目录，请检查JsonPath规则的正确性，且避免...
读写访问文件类问题
当您访问文件系统中的文件时，文件系统中的文件会受到某些限制影响，导致文件操作错误、挂载点无响应或访问无响应等。您可以在本文中查找一些常见文件操作错误、文件属主、数据不同步或访问无响应的解决方案。交叉挂载兼容性问题 Linux挂载...
- 产品推荐
- 这些文档可能帮助您