0024-00000505

问题描述 元数据转换任务数量超过了上限。问题原因 您创建的元数据转换任务数量超过了上限。问题示例 该功能为邀测功能,未对全部用户开放,暂不提供示例。解决方案 检查任务是否超过上限,删除不使用的多余任务后重试。相关文档 OSS-HDFS...

0024-00000506

问题描述 元数据转换任务中,Path数量超过了上限。问题原因 您创建的元数据转换任务中,Path数量超过了上限。问题示例 该功能为邀测功能,未对全部用户开放,暂不提供示例。解决方案 检查Path是否超过上限,删除多余的Path任务后重试。相关...

0024-00000501

问题描述 元数据转换请求中的XML格式或参数不正确。问题原因 您发起了元数据转换相关的管理请求,请求中XML格式或参数不正确。问题示例 该功能为邀测功能,未对全部用户开放,暂不提供示例。解决方案 该功能为邀测功能,如果发现此错误,请...

0037-00000005

问题描述 元数据索引查询参数有误。问题原因 您发起了DoMetaQuery请求查询Bucket中符合条件的文件,但是查询请求体XML结构不符合规范。问题示例 无 解决方案 结合响应中的ErrorCode和ErrorMessage定位请求体XML中存在的问题,并结合...

功能特性

什么是数据校验 订正 元数据订正 当校验出数据结构不一致时,可以根据校验结果进行订正。结构订正 查看数据校验详情 全量数据订正 当校验出全量数据不一致时,可以根据校验结果并下载订正SQL进行订正。查看数据校验详情 增量数据订正 当...

使用DLA分析OSS中的事件

常见问题 OSS存储CSV格式文件时,为什么OSS元数据发现不任何表?OSS存储CSV格式文件时,为什么OSS元数据发现的字段类型不对?OSS元数据发现,是否支持CSV文件第一行是说明,第二行是文件头,第三行才是数据?相关文档 OSS访问日志分析

新功能发布记录

什么数据管理DMS 02月 功能名称 变更类型 功能描述 相关文档 数据库迁移 新增 通过产品化解决方案的封装,实现数据库迁移、校验和清理的闭环操作。同时支持库名称修改、迁移前预校验、迁移后数据一致性校验及来源数据库的清理,保证数据...

2020年

时空数据库(V2.8)类别 名称 描述 相关文档 新增 栅格数据元数据访问接口增强 新增ST_XMin函数,用于获取栅格数据X方向最小值。ST_XMin 新增ST_YMin函数,用于获取栅格数据Y方向最小值。ST_YMin 新增ST_XMax函数,用于获取栅格数据X方向...

自定义购买实例

镜像 系统盘容量范围(GiB)Linux(不包括FreeBSD和Red Hat)[max{20,镜像文件大小},2048]FreeBSD[max{30,镜像文件大小},2048]Red Hat[max{40,镜像文件大小},2048]Windows[max{40,镜像文件大小},2048](可选)数据数据盘用于存储应用...

0024-00000502

问题描述 管理元数据转换任务请求(修改或删除)时,设置了RoleID。问题原因 您发起了管理元数据转换任务请求(修改或删除),并设置了RoleID。问题示例 该功能为邀测功能,未对全部用户开放,暂不提供示例。解决方案 管理元数据转换任务...

0024-00000503

问题描述 创建元数据转换任务请求中的RoleID为空。问题原因 您发起了创建元数据转换任务请求,请求中的RoleID为空。问题示例 该功能为邀测功能,未对全部用户开放,暂不提供示例。解决方案 填写正确的RoleID。相关文档 OSS-HDFS服务的...

0024-00000507

问题描述 启动元数据转换任务时,任务状态冲突。问题原因 您启动元数据转换任务时,任务状态不为空闲。问题示例 该功能为邀测功能,未对全部用户开放,暂不提供示例。解决方案 检查当前任务状态,如不为空闲状态,请等任务执行完成,状态为...

0011-00000008

问题描述 文件元数据中Content-Encoding的值包含非法字符。问题原因 请求中指定了文件元数据,但是文件元数据中的Content-Encoding字段包含非法字符。问题示例 例如,您发起了PostObject请求,并通过表单域中的Content-Encoding字段声明...

0011-00000007

问题描述 文件元数据中Content-Disposition的值包含非法字符。问题原因 请求中指定了文件元数据,但是文件元数据中的Content-Disposition字段包含非法字符。问题示例 例如,您发起了PostObject请求,并通过表单域中的Content-Disposition...

0011-00000010

问题描述 文件元数据中Expires的值包含非法字符。问题原因 请求中指定了文件元数据,但是文件元数据中的Expires字段包含非法字符。问题示例 例如,您发起了PostObject请求,并通过表单域中的Expires字段声明缓存内容的绝对过期时间,格式应...

0011-00000006

问题描述 文件元数据中Content-Type的值包含非法字符。问题原因 请求中指定了文件元数据,但是文件元数据中的Content-Type字段包含非法字符。问题示例 例如,您发起了PostObject请求,并通过表单域中的Content-Type字段声明上传的文件类型...

0024-00000504

问题描述 创建元数据转换任务请求时,命中前缀参数含有OSS-HDFS的特殊路径。问题原因 您发起了创建元数据转换任务请求,命中前缀参数含有OSS-HDFS的特殊路径。命中前缀不支持设置为..d、.dl、.dls、.dlsd、.dlsda、.dlsdat、.dlsdata其中...

现代IM系统中的消息系统—实现

功能:元数据管理 元数据是指描述数据数据,此处主要体现为用户元数据和会话元数据两类。此处群的元数据信息包括群ID(复用群的timelineId)、群名称、创建时间等信息,可以直接基于timelineMeta的管理表完成实现,所有Group类型的...

0011-00000009

问题描述 文件元数据中Cache-Control的值包含非法字符。问题原因 请求中指定了文件元数据,但是文件元数据中的Cache-Control字段包含非法字符。问题示例 例如,您发起了PostObject请求,并通过表单域中的Cache-Control字段指定Object的缓存...

0037-00000004

问题描述 Bucket元数据索引库未构建完成。问题原因 您发起了DoMetaQuery或GetMetaQueryStatus请求,但是请求的目标Bucket元数据索引库未构建完成。问题示例 例如,你发起了DoMetaQuery请求,但是请求的Bucket(oss-example)元数据索引库未...

数据湖管理FAQ

Lakehouse相关问题 什么是Lakehouse?Lakehouse数据入湖时,对线上RDS有压力吗?如何控制建仓的限流能力?Lakehouse工作负载为什么运行失败,又没有S park Log 日志可以看?元数据发现相关问题 为什么配置了信息发现,并在“手动执行”...

0041-00000111

问题描述 无法解析自定义元数据问题原因 请求触发镜像回源时,源站解析自定义元数据格式错误。问题示例 解析x-oss-persistent-headers内容不合法。其他情况 解决方案 排查源站异常。相关文档 镜像回源

管理文件元数据

设置自定义元数据 您可以自定义文件的元数据来对文件进行描述。以下代码用于设置文件的自定义元数据。package com.aliyun.oss.demo;import com.aliyun.oss.ClientException;import com.aliyun.oss.OSS;import com.aliyun.oss.common.auth.*...

EMR元数据迁移DLF最佳实践

通过EMR+DLF数据湖方案,可以为企业提供数据湖内的统一的元数据管理,统一的权限管理,支持多源数据入湖以及一站式数据探索的能力。本方案支持已有EMR集群元数据库使用RDS或内置MySQL数据库迁移DLF,通过统一的元数据管理,多种数据源入湖...

EMR元数据迁移到数据湖构建(DLF)

本文为您介绍如何将Hive MetaStore存储在MySQL、RDS中的元数据迁移到DLF中,并介绍如何在EMR集群中配置使用DLF作为数据湖统一元数据。适用场景 从其他大数据集群迁移到阿里云E-MapReduce产品。从阿里云EMR老集群(MySQL做元数据),整体...

0011-00000005

问题描述 用户自定义元数据(User Meta)中Value包含非法字符。问题原因 自定义元数据是一组键值对,该报错是因为键值对中的Value包含非法字符。问题示例 正确示例:x-oss-meta-last-modified:20210506。解决方案 检查自定义元数据的Value...

OOM常见问题排查指南

关于该问题产生的原因、主要影响和解决方法具体如下:产生原因 元数据占用内存多 表现为Meta内存使用率高:表数据量增加,数据总量也随之增加,元数据占用内存多,当没有任务运行时,内存水位也会高,通常建议一个Table Group下不要超过...

Dataphin共享元数据查出循环依赖

问题描述 Dataphin共享元数据查出循环依赖。解决方案 ld_amway_newretail.dim_combination_camp_user,这种节点是Dataphin系统内部的节点,下游依赖它,只是依赖它里面的字段,产生的循环依赖是允许的,因为是字段级别依赖。适用于 ...

0037-00000003

问题描述 Bucket不存在元数据索引库。问题原因 您发起了DoMetaQuery或GetMetaQueryStatus请求,但是请求的目标Bucket没有开启元数据管理功能。问题示例 例如,你发起了DoMetaQuery请求,但是请求的Bucket(oss-example)未开启元数据管理...

常见问题

一般性常见问题 什么是 表格存储?表格存储 面向海量结构化数据提供Serverless表存储服务,同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储,提供...

功能特性

OSS-HDFS服务概述 OSS-HDFS服务的元数据转换 OSS-HDFS服务支持在未部署任何导入和导出工具的情况下,直接将OSS元数据转换为OSS-HDFS元数据。OSS-HDFS服务的元数据转换 OSS-HDFS服务的冷热分层存储 OSS-HDFS中存储的部分数据并非需要频繁...

Dataphin资产元数据的分区记录数不准确

问题描述 Dataphin资产元数据的分区记录数不准确,显示为0,但是在即席查询中显示分区是数据的。问题原因 资产这里分区记录数是T+1更新的。由于ds='20220420'分区是2022041才产出的,因此是没有采集到的。解决方案 待T+1后就会更新ds='...

Hadoop集群迁移至DataLake集群

本文将详细阐述如何将您已有的旧版数据湖集群(Hadoop),高效地迁移至数据湖集群(DataLake),以下分别简称“旧集群”和“新集群”。迁移过程将充分考虑旧集群的版本、元数据类型以及存储方式,并针对这些因素,提供适应新集群的迁移策略...

模型介绍

Meta:用于描述Timeline的元数据,元数据描述采用free-schema结构,可自由包含任意列。Queue:一个Timeline内所有Message存储在Queue内。SequenceId:Queue中消息体的序列号,需保证递增、唯一。模型支持自增列、自定义两种实现模式。...

0037-00000002

问题描述 无法为Bucket开启元数据管理功能。问题原因 您发起OpenMetaQuery请求为Bucket开启元数据管理功能,但是请求的Bucket已开启或者正在关闭元数据索引库。问题示例 例如,您发起OpenMetaQuery请求为Bucket(oss-example)开启元数据...

基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...

Delta Lake和Hudi是数据湖方案中常用的存储机制,为数据湖提供流处理、批处理能力。MaxCompute基于阿里云DLF、RDS或Flink、OSS产品提供了支持Delta或Hudi存储机制的湖仓一体架构。您可以通过MaxCompute查询到实时数据,即时洞察业务数据...

管理文件元数据

Last-Modified 由OSS自动更新,用于缓存控制、同步和数据管理,以UTC格式表示,不可手动更改。更多信息,请参见 哪些操作会更新Object的LastModified?说明 OSS控制台在展示文件更新时间时,会将其从UTC时间格式转换为本地时间格式,从而...

DLF-Auth

DLF-Auth组件是数据湖构建DLF(Data Lake Formation)产品提供的,通过该组件可以开启数据湖构建DLF的数据权限功能,可以对数据库、数据表、数据列、函数进行细粒度权限控制,实现数据湖上统一的数据权限管理。本文为您介绍如何开启DLF-...

Maxwell

在很多情况下,利用这个特性非常的有用,例如:将增量数据数据库同步到其他系统 日志审计 数据库的实时物化视图 数据库表的temporal join变更历史 Flink还支持将Flnk SQL中的INSERT、UPDATE或DELETE消息编码为Maxwell格式的JSON消息,...

0026-00000004

问题描述 并发修改对象的元数据或标签。问题原因 您执行的对象元数据修改操作或对象标签修改操作产生冲突。问题示例 无。解决方案 请勿执行对象元数据或对象标签的并发修改操作。相关文档 StaleFile
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 数据传输服务 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用