迁移元数据上云
迁移元数据上云是指将开源RabbitMQ集群的元数据导出，并将其导入到阿里云 云消息队列 RabbitMQ 版 实例。云消息队列 RabbitMQ 版 会根据成功导入的元数据在目标 云消息队列 RabbitMQ 版 实例中创建对应的Vhost、Queue、Exchange、Binding，...
许可证配置
自定义元数据：输入需要额外限制服务的自定义数据。输入的自定义元数据内容长度不超过1024个字符，格式不限。调用校验许可证接口的时，会返回此处设置的内容。说明 自定义元数据设置后，不论校验自定义许可证还是云市场许可都会返回此处...
Call Caching 用法详解
查看元数据 工作流执行时，每一个 task 的每一个 call（对应批量计算的一个作业）都会有 metadata，记录了这个步骤的运行过程，当然也包括 Call Caching 的详细信息，通过下面的命令可以查询一个工作流的 metadata：widdler query-m...
数据加密
具体工作原理如下图所示。使用用户自主管理密钥 使用用户自主管理密钥时，需要您自主生成并保管加密密钥。当本地客户端加密Object时，由用户自主上传加密密钥（对称加密密钥或者非对称加密密钥）至本地加密客户端。其具体加密过程如下图所...
资源包概述
资源包是群空间下从数据源到数据门户的元数据信息，本文为您介绍如何使用资源包进行资源的快速复制、分发。适用场景 企业版本管理。同一环境下，区分A空间和B空间。每个版本由A空间导入B空间，实现版本发布和隔离管理。不同环境下，区分开A...
使用Webshell诊断应用
说明 关于VPC的原理和产品介绍，请参见 产品架构。鉴于VPC的产品特性和当前 SAE 的产品特性，容器无法直接触达VPC外的服务（OSS、镜像服务等阿里云产品除外）。在没有额外配置的情况下，您的容器单独运行在网络环境，因此您无法直接接触 ...
DataWorks On EMR使用说明
DataWorks支持基于EMR（E-MapReduce）计算引擎创建Hive、MR、Presto和Spark SQL等节点，实现EMR任务工作流的配置、定时调度和元数据管理等功能，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上使用EMR的基本开发流程，以及相关 ...
DataWorks On Hologres使用说明
Hologres可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发Hologres任务的基本流程、费用说明、环境准备、权限控制等内容。前提条件 已开通...
DataWorks On CDP/CDH使用说明
背景信息 CDH是Cloudera的开源平台发行版，提供开箱即用的集群管理、集群监控、集群诊断等功能，并支持使用多种组件，助力您执行端到端的大数据工作流程。CDP是跨平台收集和整合客户数据的公共数据平台，可帮助您收集实时数据，并将其构建...
DataWorks On MaxCompute使用说明
MaxCompute可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发MaxCompute任务的基本流程、费用说明、环境准备、权限控制等内容。前提条件 已...
产品架构
单元化应用服务，基于 Kubernetes 基础设施提供跨集群资源管理、发布运...与各 PaaS 基础产品对接，提供权限、资源、应用元数据、工作空间、部署单元等领域模型的管理能力。与监控分析平台对接，向用户提供完整集群资源和业务应用的可观测性。
元数据
元数据用于产品内的展示、检索使用，同时也是敏感数据规则自动化识别的基础信息，也是库、表、字段、数据行、可编程对象等细粒度的权限管控的基础信息。数据管理DMS会根据数据库实例的管控模式提供不同的采集范围与采集方式。背景信息 ...
工作组成员管理
数据变更：可访问工作组内云计算资源的元数据信息和数据信息，同时可对表内容进行变更。添加完成后，单击 确定。编辑成员角色 登录 数据资源平台控制台。在页面右上角，单击 图标，选择 系统设置。在左侧导航栏，单击 工作组管理。在 工作...
工作组成员管理
数据变更：可访问工作组内云计算资源的元数据信息和数据信息，同时可对表内容进行变更。添加完成后，单击 确定。编辑成员角色 登录企业数据智能平台。在页面右上角，单击 图标，选择 系统设置。在左侧导航栏，单击 工作组管理。在 工作组...
ALIYUN:RAM:SAMLProvider
SAMLMetadataDocument String 否 是 元数据文档内容。大小为1～102,400字节。必须指定SAMLMetadataDocumentURL或SAMLMetadataDocument，但不能同时指定二者。EncodedSAMLMetadataDocument String 否 是 元数据文档。经过Base64编码。由支持...
功能简介
支持对已配置连通的数据源进行元数据同步及数据对象查看，帮助用户了解元数据资产内容。数据模板管理 针对半结构化、非结构化数据，支持创建数据模板，支持自定义数据字段及字段类型，并提供编辑、删除等功能。支持在离线数据同步、实时...
数据同步
支持对已配置连通的数据源进行元数据同步及数据对象查看，帮助用户了解元数据资产内容。数据模板管理 针对半结构化、非结构化数据，支持创建数据模板，支持自定义数据字段及字段类型，并提供编辑、删除等功能。支持在离线数据同步、实时...
功能简介
支持对已配置连通的数据源进行元数据同步及数据对象查看，帮助用户了解元数据资产内容。数据模板管理 针对半结构化、非结构化数据，支持创建数据模板，支持自定义数据字段及字段类型，并提供编辑、删除等功能。支持在离线数据同步、实时...
数据容灾
目标Bucket中的对象是源Bucket中对象的精确副本，它们具有相同的对象名、版本信息、元数据以及内容，例如创建时间、拥有者、用户定义的元数据、Object ACL、对象内容等。支持复制未加密的对象和使用SSE-KMS、SSE-OSS方式进行服务器端加密的...
配置数据保护规则
全密态数据库会将您配置的数据保护规则内容持久化到数据库内的系统表上（简称全密态元数据表，即mysql.encdb_sensitive_rules和mysql.encdb_auth_users），仅有高权限或者被授权用户可以进行写操作。前提条件 RDS MySQL实例的大版本为MySQL...
GetFileMeta-获取文件元数据
获取数据集内已完成索引的文件的元数据。接口说明 请确保在使用该接口前，已充分了解智能媒体管理产品的收费方式和 价格。调用该接口前，请确保您已通过绑定方式（CreateBinding）或者主动索引（IndexFileMeta 或者 BatchIndexFileMeta）...
BatchGetFileMeta-批量获取文件元数据
批量获取数据集内已完成索引的文件的元数据。接口说明 请确保在使用该接口前，已充分了解智能媒体管理产品的收费方式和 价格。调用该接口前，请确保您已通过绑定方式（CreateBinding）或者主动索引（IndexFileMeta 或者 BatchIndexFileMeta...
EMR元数据迁移公告
本文为您介绍迁移E-MapReduce（简称EMR）元数据至数据湖元数据DLF（Data Lake Formation）中的原因及迁移流程。迁移原因 2020年阿里云EMR推出全新的数据湖构建和统一元数据服务，为EMR用户提供了更好的统一元数据服务方案。阿里云EMR团队...
API概览
元数据 API 标题 API概述 目录 目录 CreateCatalog 创建数据湖数据目录 创建数据湖数据目录。DeleteCatalog 删除数据湖数据目录 删除数据目录。UpdateCatalog 更新目录 更新数据目录内容。ListCatalogs 获取数据目录列表 分页查询，获取...
IndexFileMeta-文件元信息建立索引
对输入的文件进行数据处理如标签识别、人脸检测、地点检测等，将提取的文件元信息建立索引，支持用户在一个数据集内多样化的数据检索。接口说明 请确保在使用该接口前，已充分了解智能媒体管理产品的收费方式和 价格。文件元信息建立索引...
功能概览
本文介绍 云备份 的数据同步功能概览，包括数据同步的简介、工作原理、操作流程和费用等。简介 数据同步功能是阿里云 云备份 提供的一项在线数据同步服务，便于将源端数据（包括NAS、HDFS、S3兼容存储、对象存储OSS、CPFS、OSS协议兼容存储...
EMR元数据迁移到数据湖构建（DLF）
本文为您介绍如何将Hive MetaStore存储在MySQL、RDS中的元数据迁移到DLF中，并介绍如何在EMR集群中配置使用DLF作为数据湖统一元数据。适用场景 从其他大数据集群迁移到阿里云E-MapReduce产品。从阿里云EMR老集群（MySQL做元数据），整体...
EMR元数据迁移DLF最佳实践
通过EMR+DLF数据湖方案，可以为企业提供数据湖内的统一的元数据管理，统一的权限管理，支持多源数据入湖以及一站式数据探索的能力。本方案支持已有EMR集群元数据库使用RDS或内置MySQL数据库迁移DLF，通过统一的元数据管理，多种数据源入湖...
云存储网关软件版公测
元数据 元数据存储管理 下表详细列举了ossfs与云存储网关软件版元数据相关的原理对比：对比项 云存储网关软件版 ossfs 元数据缓存 云存储网关软件版采用KV数据库存储数据，它会将元数据全量缓存到缓存盘里，能够处理大规模的文件数目。...
落标监控概述
落标监控 落标监控是基于数据标准对映射到的对象进行的监控，可分为 元数据监控 和 内容质量监控：元数据监控是评估资产对象的元数据字段值和标准定义的属性值是否一致。内容监控是指针对标准映射到的资产对象（如字段、指标），评估其具体...
权限列表
工作组成员管理角色包括：工作组管理员、工作组开发者、工作组分析员、元数据读取、数据读取、数据变更。全局成员管理配置角色包括：租户管理员、租户访客、租户数据资产管理员、租户运维人员、租户一般用户。对号（√）表示支持，叉号（X...
权限列表
工作组成员管理角色包括：工作组管理员、工作组开发者、工作组分析员、元数据读取、数据读取、数据变更。全局成员管理配置角色包括：租户管理员、租户访客、租户数据资产管理员、租户运维人员、租户一般用户。对号（√）表示支持，叉号（X...
落标监控概述
落标监控 落标监控是基于数据标准对映射到的对象进行的监控，可分为 元数据监控 和 内容质量监控：元数据监控是评估资产对象的元数据字段值和标准定义的属性值是否一致。内容监控是指针对标准映射到的资产对象（如字段、指标），评估其具体...
基本概念
工作流 在创建IMM项目或数据集时，可以为项目或数据集设置工作流模板（Template），模板定义了提取文件元信息时所需要执行的工作流。IMM提供的工作流模板如下：Official:DefaultEmptyId：在建立元数据索引时，所有算子都不操作，不会产生...
背景信息
本教程讲解如何将LocalFS的数据迁移至阿里云对象存储OSS。概述 阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象存储OSS，也可以在...教程内容 准备工作 迁移实施 后续操作
背景信息
本教程讲解如何在LocalFS之间进行数据迁移。概述 阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象存储OSS，也可以在LocalFS与OSS之间、...教程内容 准备工作 迁移实施 后续操作
为什么云存储网关与OSS上的文件不一致
工作原理 详情请参见 基于按需扫描机制的常规反向同步。详情请参见 基于消息通知的极速同步。详情请参见 基于API触发的单次反向同步。基于按需扫描机制的常规反向同步 云存储网关默认采用基于按需扫描机制的 反向同步 功能，将OSS上的变化...
1.1.5版本
新功能发布 数字工厂 1）新增行业平台主数据...主数据元数据 1）行业标准管理主数据新增行业平台统一管控标识 2）行业标准管理元数据新增行业平台统一管控标识 集成工作台 1）取消工业组态、脚本功能以及规则管理，由物联网应用开发替代该功能
产品架构
元数据管理层 基于处理引擎提供的功能，通过对场景的深入理解和梳理，智能媒体管理封装了场景的元数据设计，对外提供场景的元数据访问接口，简化场景应用的设计难度、无需关注元数据索引数据库的运维工作，目前支持的元数据索引如下：人脸...
应用监控网络配置
8080（由ACM服务提供，用于应用配置服务）9990（由调用链&元数据接入点提供，用于元数据上报）80（由调用链&元数据接入点、指标接入点、持续剖析服务提供，分别用于调用链、指标、持续剖析数据的上报）9092（由调用链&元数据接入点提供，...
- 产品推荐
- 这些文档可能帮助您