数据上传
参数 描述 预览数据并设置目标表字段（上传数据至已有表）需配置数据所在文件的列与目标表字段的映射关系，配置后相关数据才可被成功上传。映射方式包括 按列名映射 及 按顺序映射。映射后您也可自定义目标表的字段名称。说明 若待上传数据...
文档更新动态（2024年）
更新说明 管理数据标准待发布对象 管理数仓规划待发布对象 管理编码研发待发布对象 管理标签待发布对象 2024年02月 更新时间：2024年02月27日 对应发布的版本：V3.13 文档节点 描述 更新、新增 相关文档 管理中心-系统设置-计算设置 未创建...
功能特性
配置管理 数据保护 敏感数据管理 DMS的敏感数据保护能力能根据所选的敏感数据扫描模板、敏感数据识别模型以及脱敏算法对数据进行脱敏处理，以避免敏感数据滥用，有效保护企业的敏感数据资产，防止数据泄露造成企业经营资金损失或罚款。...
配置SQLServer数据源
说明 您也可以在 数据集成 页面进入 数据源管理 配置数据源，但此方式只支持生产环境的数据源。在 数据源管理 页面，单击右上角的 新增数据源。在 新增数据源 对话框中，选择数据源类型为 SQLServer。在 新增SQLServer数据源 对话框中，...
什么是数据资源平台
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
文档更新动态（2023年）
支持配置数据源编码，配置数据源编码后，可在Flink SQL任务中通过 数据源编码.table 或 数据源编码.schema.table 的格式引用MySQL、Hologres和MaxCompute数据源中的表。更新说明 创建FTP数据源 创建Salesforce数据源 创建OSS数据源 管理...
功能更新动态（2023年）
支持配置数据源编码，配置数据源编码后，可在Flink SQL任务中通过 数据源编码.table 或 数据源编码.schema.table 的格式引用MySQL、Hologres和MaxCompute数据源中的表。创建FTP数据源 创建Salesforce数据源 创建OSS数据源 安全设置 安全...
我是安全管理员
入门操作 在 敏感数据管理 中配置敏感、机密字段的脱敏以及加密算法。详情请参见 敏感数据管理。在 操作日志 中进行操作审计的管控。详情请参见 操作日志。支持安全管理员用户的功能总览 类目 功能 说明 SQL窗口 单库查询 在单库查询中可以...
管理识别模型
登录 数据管理DMS 5.0。在顶部菜单栏中，选择 安全与规范>敏感数据管理>规则配置。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>安全与规范>敏感数据管理>规则配置。选择 识别模型 页签。单击模型来源框...
数据查询
Lindorm宽表引擎在集群管理系统中提供了SQL查询入口，您可以使用SQL语法来查询Lindorm宽表数据。本节介绍通过集群管理系统查询宽表数据。前提条件 已登录目标实例的集群管理系统，具体操作请参见 登录集群管理系统。使用限制 为确保数据...
使用场景
包含但不限于如下场景：数据迁移与同步 使用DMS任务编排配置和管理数据迁移或数据同步任务，将数据从一个数据源迁移到另一个数据源，或实现同数据源、不同数据源之间的数据实时同步。数据清洗与加工 DMS任务编排可以用于数据清洗和加工任务...
创建数据流
在数据管理DMS离线集成中，可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。本文介绍创建数据流和配置的方法。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB...
数据中心
数据管理 数据管理模块展示并管理用户添加的数据。主要功能包括数据表引入、本地数据导入。数据表 支持用户从已注册的计算资源类型中添加数据表。支持基于已添加的数据查看表信息、表内展示的字段。支持将已添加的源表数据进行删除。本地...
数据服务系统配置
数据服务系统配置入口 在Dataphin首页，单击顶部菜单栏 服务。按照下图指引，进入 系统配置 页面。API缓存数据存储位置 在 API缓存数据存储位置 区域，单击 修改 按钮，支持指定API缓存数据的存储位置。Dataphin系统的redis：将缓存数据...
敏感数据审计
数据管理DMS提供的敏感数据审计功能，记录了敏感数据在DMS中的使用情况，可以解决敏感数据异常使用和数据泄露的溯源问题。功能介绍 审计覆盖的功能模块：SQL窗口中的查询与变更、数据结果集导出、数据库导出和普通数据变更。功能入口：安全...
调整字段安全级别
当您需要提升或降低字段的安全级别时，您可参考本文在数据管理DMS的SQL Console中调整字段的安全级别。前提条件 实例已开启敏感数据保护功能。具体操作，请参见 开通敏感数据保护。设置敏感等级的影响 设置敏感等级后，对使用数据的影响：...
系统管理
本文为您介绍如何在系统管理中配置SQL查询、数据上传任务所使用的资源组。使用限制 仅支持阿里云主账号访问系统管理页面。系统管理中的配置仅在本租户的当前地域生效，并且您需确保SQL查询、数据上传任务使用的数据源和资源组网络连通。...
名词解释
配置推送 配置管理中，常需要配置管理系统将配置的变更分发到相关的系统，从分发到配置生效的过程称为配置推送。推送轨迹 从配置变更，配置推送到配置生效过程的整个轨迹称为推送轨迹。通过查看某个配置的推送轨迹，我们可以获知一个配置...
退款说明
如果您不需要使用 数据管理DMS 新版的稳定变更模式、安全协同模式和敏感数据保护付费服务，请根据本文操作进行退订。注意事项 退订包年包月或按量付费的敏感数据保护服务，不会清理实例上已有的数据分类分级信息（含配置的脱敏规则）。说明...
数据管理DMS中添加自建MySQL数据库时出现“not ...
null,message from server:"Host 'x.x.x.x' is not allowed to connect to this MySQL server"问题原因 数据管理DMS的IP地址不在自建MySQL数据库的授权用户表中。解决方案 说明 如果您对实例或数据有修改、变更等风险操作，务必注意实例的...
字段安全级别
为了根据数据的敏感程度对数据进行不同策略的脱敏和管理，数据管理DMS将敏感数据分为3个安全级别。根据数据的敏感程度，数据分为3个安全级别。说明 字段安全级别只针对阿里云 DMS 或通过 DMS 安全访问代理生效，对其他第三方工具不生效。低...
逻辑表查询
数据管理DMS 基于产品内的 逻辑库、逻辑表 的聚合实现了透明化的逻辑表查询操作。操作步骤 选择 逻辑库 进行相关的查询与导出操作。您可先尝试写入数据，无路由配置时只支持查询 SELECT、UPDATE、DELETE 语句，不支持 INSERT 语句。配置...
更改实例环境类型
本文介绍数据管理DMS支持的实例环境类型以及更改实例环境类型的步骤。注意事项 建议您按照数据库实际环境选择实例环境类型。在安全协同管控模式下，测试环境在安全规则中默认免审批、弱管控。生产环境在安全规则中默认强管控。但您可以按需...
配置MySQL输入
如果未配置数据源，请单击右侧的 新建数据源，进入 工作空间管理>数据源管理 页面进行新建。表 选择当前数据源下需要同步的表名称。您可以单击右侧的 数据预览 进行确认。您可以实现分库分表的场景，配置的库和表会在该任务中同时进行实时...
什么是数据库网关
数据管理DMS 数据管理DMS（Data Management Service）是一款支撑数据全生命周期的一站式数据管理平台。DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值...
简介
其结合了DMS熟练的数据管理、数据使用能力，可帮助开发、运维、产品等人员，更高效、规范地使用和管理数据。更多信息，请参见 Data Copilot智能助手。Notebook：一个交互式的记事本，可以将代码、文字、图表集中在一个页面，支持高效查询、...
配置DTS数据迁移节点
操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>数据开发>任务编排。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>集成与开发（DTS）>数据开发>任务编排。在顶部菜单栏中，选择...
产品优势
数据管理DMS是一款支撑数据全生命周期的一站式数据管理平台，本文介绍数据管理DMS的产品优势。实现全域数据资产管理 支持全域数据资产：关系型数据库：MySQL、SQL Server、PostgreSQL、PolarDB MySQL版、PolarDB PostgreSQL版（兼容Oracle...
数据源概述
数据源功能概述 配置数据源时，您需要了解如下内容：能力 说明 数据源支持情况与配置 在配置数据集成同步任务前，您需要提前在DataWorks数据源管理页面配置好需要同步的数据源。数据集成目前支持几十种数据源，目前支持的数据源及其配置...
发布数据流
登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>数据集成>离线集成。单击数据流名称，进入数据流详情页面。可选：试运行数据流。单击画布左上方的 试运行 按钮。在 提示 对话框，单击 确认。单击画布的空白区域，单击页面...
创建MongoDB数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
数据可视化
数据管理DMS 提供灵活布局和丰富的自定义样式能力，并提供大量可视化组件和内置辅助图形，帮助您快速实现可视化大屏。说明 数据可视化功能即将下线，建议您在功能下线前将数据集、图表和仪表盘迁移到数据分析功能。更多信息，请参见【通知...
创建MongoDB数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
创建DataHub数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
管理迭代
数据管理DMS的DevOps迭代提供了逐阶段推进研发流程的功能，每个迭代的阶段内都可以直接新建相应类型的工单，使得开发协同性更好，开发更高效。新建迭代 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 数据库开发>研发空间>DevOps。单击 迭代...
数据库克隆
数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化，例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同，且都为MySQL。数据库实例的...
创建Aliyun HBase数据源
依次单击 数据源管理->数据源->新建数据源。在 新建数据源 对话框的 NoSQL 区域，选择 Aliyun HBase。如果您最近使用过Aliyun HBase，也可以在 最近使用 区域选择Aliyun HBase。同时，您也可以在搜索框中，输入Aliyun HBase的关键词，快速...
管理项目
数据管理DMS提供DevOps功能，您可以在项目空间内指定参与人员、数据库和迭代模板，合理有效地保障研发流程顺利开展，减少误操作，保护数据安全。新建项目 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 数据库开发>研发空间>DevOps。单击 ...
创建Aliyun HBase数据源
依次单击 数据源管理->数据源->新建数据源。在 新建数据源 对话框的 NoSQL 区域，选择 Aliyun HBase。如果您最近使用过Aliyun HBase，也可以在 最近使用 区域选择Aliyun HBase。同时，您也可以在搜索框中，输入Aliyun HBase的关键词，快速...
创建GreenPlum数据源
配置数据源的高级设置。参数 描述 connectTimeout 数据库的connectTimeout时长（单位s），默认900秒（15分钟）。说明 若您在JDBC URL中带有connectTimeout配置，则connectTimeout为JDBC URL中配置的超时时间。Dataphin V3.11版本之前的创建...
- 产品推荐
- 这些文档可能帮助您