数据查询
Lindorm宽表引擎在集群管理系统中提供了SQL查询入口，您可以使用SQL语法来查询Lindorm宽表数据。本节介绍通过集群管理系统查询宽表数据。前提条件 已登录目标实例的集群管理系统，具体操作请参见 登录集群管理系统。使用限制 为确保数据...
数据管理DMS中添加自建MySQL数据库时出现“not ...
null,message from server:"Host 'x.x.x.x' is not allowed to connect to this MySQL server"问题原因 数据管理DMS的IP地址不在自建MySQL数据库的授权用户表中。解决方案 说明 如果您对实例或数据有修改、变更等风险操作，务必注意实例的...
FineBI
您可以通过FineBI连接 云原生数据仓库AnalyticDB MySQL版，以可视化的形式帮助您进行多样数据管理，例如过滤、分组汇总、新增列、字段设置、排序等，极大的提升了数据整合的便利性和效率。前提条件 了解FineBI与 AnalyticDB MySQL版 之间的...
更改实例环境类型
本文介绍数据管理DMS支持的实例环境类型以及更改实例环境类型的步骤。注意事项 建议您按照数据库实际环境选择实例环境类型。在安全协同管控模式下，测试环境在安全规则中默认免审批、弱管控。生产环境在安全规则中默认强管控。但您可以按需...
文档更新动态（2022年）
新增说明 新建和管理标准集、新建和管理数据标准、新建和管理落标映射规则、新建和管理标准代码（码表）、新建和管理词根、新建和管理标准集目录 2022年10月25日 资产安全脱敏算法、密钥管理、生产安全模式优化 支持底层脱敏和仅展示脱敏...
功能更新动态（2022年之前）
2021年08月19日 华北2（北京）、华东1（杭州）购买指引、计费说明 2021年08月24日 华南1（深圳）2021年08月26日 华东2（上海）数据源：可支持的数据源类型和版本拓展，优化数据源配置交互 新建数据源页面支持分类展示数据源类型，同时增加...
文档更新动态（2022年之前）
新功能 网络连通解决方案 2021年08月24日 数据服务：支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度有要求的业务场景，Dataphin支持为项目添加加速计算源，且完成Dataphin数据源开发后，您可以手动...
批量创建质量规则
连通性监测：配置到Dataphin上的数据源因网络变更、用户名、密码等原因导致连接不上，进而导致任务报错，对连通性监测的变化进行加监控告警。表结构异动：上游表的结构变化，如更名、删除、增减字段，进而导致下游报错，对表结构的变化进行...
批量创建质量规则
连通性监测：配置到Dataphin上的数据源因网络变更、用户名、密码等原因导致连接不上，进而导致任务报错，对连通性监测的变化进行加监控告警。表结构异动：上游表的结构变化，如更名、删除、增减字段，进而导致下游报错，对表结构的变化进行...
通过数据管理DMS登录云数据库RDS实例时报“Read timed...
问题描述 通过数据管理DMS登录云数据库RDS实例时报下列错误：Read timed out.问题原因 未将数据管理DMS的IP地址段加入RDS实例的白名单。解决方案 请参见下列文档，将DMS的IP地址段加入RDS实例的白名单：通过DMS登录RDS数据库 RDS实例如何...
服务等级协议SLA
本文介绍了阿里云向客户提供的数据管理服务DMS的服务可用性等级指标及赔偿方案。本产品最新版服务等级协议，请在 阿里云服务等级协议汇总页 查找获取。说明 数据管理服务等级协议仅适用于DMS稳定变更和安全协同模式实例，DMS自由操作模式...
名词解释
背景信息 时间序列数据库 TSDB：英文全称为 Time Series Database，提供高效存取时序数据和统计分析功能的数据管理系统。时序数据（Time Series Data）：基于稳定频率持续产生的一系列指标监测数据。例如，监测某城市的空气质量时，每秒...
权限管理
通过实例管理功能管理数据库、表权限 数据Owner、管理员、DBA管理权限 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 数据资产>实例管理。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>数据资产>实例管理...
简介
其结合了DMS熟练的数据管理、数据使用能力，可帮助开发、运维、产品等人员，更高效、规范地使用和管理数据。更多信息，请参见 Data Copilot智能助手。Notebook：一个交互式的记事本，可以将代码、文字、图表集中在一个页面，支持高效查询、...
安全托管
安全托管是 数据管理DMS 在阿里集团数据库权限访问控制最佳实践，为企业提供一系列数据库权限管控的集合，可帮助企业实现多云数据库统一权限管理。背景信息 传统的管理数据库方案，需要先获得数据库账号与密码，登录数据库后才能进行其他...
流量诊断
本文介绍如何通过集群管理系统查看表流量信息和表异常流量检测结果。背景信息 在实际使用数据库的过程中，会存在文件数过多导致请求时延变长的情况。同时，流量分布不均匀的问题导致部分节点负载过高并出现热点，进一步造成系统卡顿，影响...
安装Agent
Agent程序是数据库审计系统提供的功能插件，您需要在用户终端、目标数据库服务器或连接数据库的应用服务器上安装Agent，用于将数据库访问流量转发到审计系统。本文介绍安装及卸载Agent的具体操作。安装位置 根据待审计的数据库类型，您需要...
产品架构
数据源地址动态适配 对于数据订阅及同步链路，容灾系统还会监测数据源的连接地址切换等变更操作，一旦发现数据源发生连接地址变更，它会动态适配数据源新的连接方式，在数据源变更的情况下，保证链路的稳定性。数据迁移工作原理 数据迁移...
Data Copilot智能助手
操作步骤 登录 数据管理DMS 5.0。在控制台首页左侧的实例列表中，找到目标实例，左键双击目标数据库，进入SQL Console页面。您可进行如下操作：说明 若您使用的是极简模式的控制台，请单击首页左侧的 数据库实例 区域，找到目标实例，左键...
无感集成（Zero-ETL）
方案优势 简单易用：用户无需创建和维护执行ETL（提取、转换、加载操作）的复杂数据管道，仅需选择源端数据和目标端实例，自动创建实时数据同步链路，减少构建和管理数据管道所带来的挑战，专注于上层应用开发。零成本：Zero-ETL链路不额外...
数据可视化概览
本文介绍DMS数据可视化的基本概念、设计理念、场景支持等内容。背景信息 DMS为您提供了数据库数据管理的能力，同时通过SQL Console控制台为您提供以表格形式查询数据的方式，但对于需要通过分析数据去发现业务特性，比如分析趋势、增长对比...
基本概念
用户可以选择多个Mongos作为请求的入口，防止其中一个挂掉所有的MongoDB请求都无法操作。Shard MongoDB分片集群中的分片。单个Shard是由三节点的副本集组成，保证单个分片的高可用性，用户可以根据自己的应用性能及存储要求，购买多个Shard...
无锁结构变更
说明 本示例中，您需要提前对模拟开发环境的RDS MySQL实例开启DMS无锁表结构变更策略。操作步骤 本示例通过无锁结构变更功能将 big_table 表的 long_text_a 字段类型从 varchar(1024)改为 text(1024)。普通用户提交工单。以普通用户账号，...
表详情
当您需要全面了解并高效地使用表数据，您可在 数据管理DMS 的SQL窗口查看表的详细信息，包含表所属库、字段、索引、行数等技术元数据，类目、表描述等业务元数据，以及表权限、表Owner等管理元数据。背景信息 DMS在表详情中引入表的元数据...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
数据管理服务协议
《数据管理服务协议》是阿里云计算有限公司（以下简称“阿里云”）与您就数据管理服务的相关事项所订立的有效合约。《数据管理服务协议》以下或简称“本服务协议”、“服务协议”或“本协议”。背景信息 在接受本协议之前，请您仔细阅读...
测试数据构建
测试数据构建 中的模板库提供的模板如下：设置测试库免批 禁用测试数据构建功能 生产库禁止使用测试数据构建 修改默认审批模板 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 安全与规范>安全规则。选择目标数据库实例的规则集名称，单击...
配置管理
数据管理DMS开放了系统层面的配置，管理员角色可通过对这些配置进行更改，来实现更灵活的管理需求。本文档介绍配置管理的方法。前提条件 系统角色为管理员。查看系统角色的具体步骤，请参见 查看我的系统角色。操作步骤 登录 数据管理DMS 5...
查询结果不符合预期的常见原因
您可以通过集群管理系统查看TTL的值是否合适，具体步骤：在集群管理系统的 概览 页面，单击目标数据库下的目标表名。在 当前详情表格 区域，单击 查看表属性，查看 TTL 参数的值。如何进入集群管理系统，请参见 登录集群管理系统。如果您...
从零开始完成无锁结构变更
数据管理DMS的无锁结构变更功能可以较好地规避因锁表而导致的业务阻塞，以及数据库原生OnlineDDL带来的主备延迟问题。本文以云数据库RDS MySQL举例，引导您快速使用DMS完成无锁结构变更。新增实例并开启无锁结构变更 登录 数据管理DMS 5.0...
普通数据变更
数据管理DMS的普通数据变更功能支持INSERT、UPDATE、DELETE、TRUNCATE、CREATE TABLE等SQL语句，可以对数据库中的数据进行变更操作，用于数据初始化、历史数据清理、问题修复、功能测试等场景。本文介绍在DMS中进行普通数据变更的方法。...
功能特性
专业工具支持 数据管理服务DMS（Data Management Service）支持管理MySQL、SQL Server、PostgreSQL等关系型数据库和MongoDB、Redis等NoSQL数据库，同时还支持Linux服务器管理。它是一种集数据管理、结构管理、访问安全、BI图表、数据趋势、...
数据集成概述
离线（批量）的数据通道通过定义数据来源和去向的数据源和数据集，提供一套抽象化的数据抽取插件（Reader）、数据写入插件（Writer），并基于此框架设计一套简化版的中间数据传输格式，从而实现任意结构化、半结构化数据源之间数据传输。...
数据导出
修改默认审批模板 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 安全与规范>安全规则。单击目标规则集行 操作 列下的 编辑。在 详情 页左侧的导航栏中，单击 数据导出。检测点选择 基础配置项。单击 数据导出默认审批模板 规则名行 操作 列...
规划工作空间
通常来说，开发环境的数据读、写权限为各工作空间的“开发”角色共享，而生产环境的数据权限为生产账号独有 数据质量 各工作空间之间的数据质量是 完全隔离 的。仅对应工作空间的“开发”、“运维”或“管理员”角色具备配置数据质量规则的...
申请、续期和交还表权限
已生效数据表权限 您可以在数据表 已生效 页签查看数据表基本信息及对数据表执行续期及交还操作。区域 描述 ① 筛选及搜索区 支持按照 到期日期、表类型、表环境、数据板块、表所在项目、账号类型 进行筛选。支持按照数据表的名称、表所在...
申请、续期和交还表权限
已生效数据表权限 您可以在数据表 已生效 页签查看数据表基本信息及对数据表执行续期及交还操作。区域 描述 ① 筛选及搜索区 支持按照 到期日期、表类型、表环境、数据板块、表所在项目、账号类型 进行筛选。支持按照数据表的名称、表所在...
权限操作审计
③ 列表区 为您展示数据对象的名称、表环境、数据板块、项目、操作对象/操作人、操作时间、权限类型、操作范围、操作类型、有效期、操作的原因信息。数据源权限操作审计 在 数据源 页签，可查看目标数据源的权限操作记录详情或导出Excel...
权限操作审计
③ 列表区 为您展示数据对象的名称、表环境、数据板块、项目、操作对象/操作人、操作时间、权限类型、操作范围、操作类型、有效期、操作的原因信息。数据源权限操作审计 在 数据源 页签，可查看目标数据源的权限操作记录详情或导出Excel...
文档更新动态（2023年）
更新说明 新建和管理数据标准 新建和管理落标映射规则 已映射关系管理 无效映射关系管理 查看落标评估明细 资产质量功能优化 支持按照全局、项目、个人视角进行查看质量规则、校验记录、治理工作台、整改流程，并支持按照个人的权限控制...
- 产品推荐
- 这些文档可能帮助您