配置数据识别规则

进入数据识别规则 登录 DataWorks控制台 后,进入 数据保护伞 页面,操作详情请参见 数据保护伞概述。单击 开始体验,默认进入数据保护伞的 首页。单击左侧导航栏中的 规则配置>敏感数据识别,在 数据识别规则 页面您可以新增敏感字段类型...

新功能发布记录

配置SQL赋值节点 08月 功能名称 变更类型 功能描述 相关文档 数据管理DMS升级到5.0版本 迭代 数据管理DMS 5.0控制台的功能模块按照使用场景进行划分,同时集成了DTS实时数据传输功能。DMS控制台切换 07月 功能名称 变更类型 功能描述 相关...

创建数据脱敏规则

单击左上方的 图标,选择 全部产品>数据治理>数据保护伞,单击 立即体验,进入数据保护伞。说明 若阿里云主账号已授权,则直接进入数据保护伞的首页。若阿里云主账号未授权,则进入数据保护伞的授权页面。授权后才可使用保护伞的相关功能。...

离线同步并发和限流之间的关系

数据源连接数限制功能,是指:目标端写入并发数:在实时数据同步任务内,向目标端写入数据的最大线程数。需要根据资源组大小和目标端实际规模合理设置。目前可配置的上限为32,默认值为3。来源端读取支持最大连接数:同步解决方案的离线全...

实时数据API

本文为您介绍什么是实时数据API,以及实时数据API的作用。实时数据业务流程。在实时数据业务场景中,最常见的链路是将实时采集的数据,通过实时计算初步清洗,实时写入数据至数据库,再对接BI工具实现数据的可视化分析。数据处理流程如下图...

添加任务目录

在左侧导航栏,单击 图标,将鼠标悬停在 实时数据同步 上,单击 图标,选择 添加子级目录,为根目录添加子目录。在 类目属性设置 对话框,输入类目名称和类目描述,单击 确定。(可选)在左侧导航栏,单击 实时数据同步,将鼠标悬停在新建...

添加任务目录

在左侧导航栏,单击 图标,将鼠标悬停在 实时数据同步 上,单击 图标,选择 添加子级目录,为根目录添加子目录。在 类目属性设置 对话框,输入类目名称和类目描述,单击 确定。(可选)在左侧导航栏,单击 实时数据同步,将鼠标悬停在新建...

关闭敏感数据保护

如果实例中的数据库不再需要敏感数据保护功能,可以关闭该功能。本文介绍关闭敏感数据保护的方法。前提条件 用户角色为管理员、DBA或安全管理员。说明 鼠标移动到界面右上角的,查看您的角色。注意事项 敏感数据保护功能关闭后,实例上的...

【通知】敏感数据保护功能商业化

自 2021年10月13日 起,阿里云数据管理DMS中的敏感数据保护功能将转入收费阶段。商业化时间 敏感数据保护功能将于 2021年10月13日 开始收费。功能变化 商业化后,敏感数据保护的细分功能的变化如下:功能 自由操作、稳定变更模式 安全协同...

为RAM账号授权

为确保RAM用户能正常使用CDP企业数据云控制台的功能,您需要使用云账号登录访问控制RAM(Resource Access Management),授予RAM用户相应的权限。背景信息 访问控制RAM是阿里云提供的资源访问控制服务,更多详情请参见 什么是访问控制。...

应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线,您可以实时接入APP、WEB、IoT和数据库等产生的异构数据,统一管理,并投递到下游的分析、归档等系统,构建清晰的数据流,让您更好的释放数据的价值。...

上线实时任务

相关操作 操作 说明 下线实时任务 单个下线:在 实时数据同步 页面,单击目标实时任务 操作 列的 下线,在弹出对话框中单击 确定,可下线实时任务。批量下线:在 实时数据同步 页面,选择需要下线的任务,单击页面左下角 批量下线,可批量...

引擎简介

云原生多模数据库 Lindorm 流引擎面向实时数据处理场景,支持使用标准的SQL及熟悉的数据库概念完成一站式的实时数据处理,适用于车联网、物联网和互联网中常见的ETL、实时异常检测和实时报表统计等场景。本文介绍Lindorm流引擎的应用场景和...

上线实时任务

相关操作 操作 说明 下线实时任务 单个下线:在 实时数据同步 页面,单击目标实时任务 操作 列的 下线,在弹出对话框中单击 确定,可下线实时任务。批量下线:在 实时数据同步 页面,选择需要下线的任务,单击页面左下角 批量下线,可批量...

实时数据消费概述

实时数据消费功能包含高速数据导入API和实时数据源消费两部分,可实现数据直接写入Segment(分片单元),避免通过COPY或INSERT方式造成的Master写入负载高的问题,也可实现使用 AnalyticDB PostgreSQL版 单产品直接消费Kafka数据。...

新建实时自定义源类型

Dataphin支持自定义实时数据源类型,您可以基于自定义的实时数据源类型,创建实时数据源实例、实时数据源类型的元表以及访问自定义实时数据源的Flink SQL任务,以满足实际数据需求开发。本文为您介绍如何自定义实时数据源类型。使用限制 ...

迁移或同步指定时间段内的数据

如果您想要将源HBase集群或源Lindorm实例中某个时间段的历史数据迁移至新的Lindorm实例,或想要同步实时数据到新Lindorm实例,可以在创建任务时添加相关时间参数,修改任务配置。本文介绍通过LTS控制台创建任务时配置迁移或同步时间范围的...

Dataphin支持的实时数据

在Dataphin实时计算引擎下,您可通过实时任务创建实时数据源对应的表类型。本文为您介绍Dataphin各实时计算引擎支持的实时数据源及对应的读写支持。Ververica Flink支持的实时数据源 存储类型 数据源类型 读 写 维表读 大数据存储 ...

查看数据风险(旧版)

前提条件 租户管理员已授权开通数据保护伞,详情请参见 数据保护伞概述。操作步骤 登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标,选择 全部产品>...

应用场景

背景信息 作为流式计算引擎,Flink可以广泛应用于实时数据处理领域,例如ECS在线服务日志,IoT场景下传感器数据等。同时Flink还能订阅云上数据库RDS、PolarDB等关系型数据库中Binlog的更新,并利用DataHub、SLS、Kafka等产品将实时数据收集...

查看实时任务监控

在左侧导航栏,单击 图标,将鼠标悬停在 实时数据同步 上,单击 图标。在 实时数据同步 页面,单击目标实时任务 操作 列的 监控。跳转到 实时同步任务 页面,可查看实时任务运行详情,更多信息,请参见 查看实时同步任务详情。

查看实时任务监控

在左侧导航栏,单击 图标,将鼠标悬停在 实时数据同步 上,单击 图标。在 实时数据同步 页面,单击目标实时任务 操作 列的 监控。跳转到 实时同步任务 页面,可查看实时任务运行详情,更多信息,请参见 查看实时同步任务详情。

Dataphin支持的实时数据

在Dataphin实时计算引擎下,您可通过实时任务创建实时数据源对应的表类型。本文为您介绍Dataphin各实时计算引擎支持的实时数据源及对应的读写支持。Ververica Flink支持的实时数据源 存储类型 数据源类型 读 写 维表读 大数据存储 ...

到期、欠费说明

敏感数据保护功能 如果敏感数据保护功能的可用额度不足,开启敏感数据保护功能的实例会在DMS中被随机禁用。您可以选择以下任意一种解决方案:购买敏感数据保护服务后,启用被禁用的实例。重要 此操作会变更实例之前的配置。将被禁用实例的...

构建数据仓库

DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力,本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业:全行业...

敏感数据访问及导出情况

单击左上方的 图标,选择 全部产品>数据治理>数据保护伞,单击 立即体验,进入数据保护伞。说明 若阿里云主账号已授权,则直接进入数据保护伞的首页。若阿里云主账号未授权,则进入数据保护伞的授权页面。授权后才可使用保护伞的相关功能。...

敏感数据概况

单击左上方的 图标,选择 全部产品>数据治理>数据保护伞,单击 立即体验,进入数据保护伞。单击左侧导航栏的 数据发现,进入数据发现页面。数据发现页面从工作空间、分级等不同的维度,为您提供可视化的数据资产展示。您可以在该页面查看...

数据保护伞概述

数据保护伞是一款数据安全管理产品,为您提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等多种功能,帮助您快速梳理敏感数据并进行安全管控,保障数据安全。本文为您介绍数据保护伞的使用流程、使用限制等内容。使用流程...

概述

实时数据分析 实时数据分析指的是根据业务目标,从原始数据中抽取对应信息并整合的过程。例如,查看每天销量前10的商品、仓库平均周转时间、文档平均单击率和推送打开率等。实时数据分析则是上述过程的实时化,通常在终端体现为实时报表或...

什么是ETL

数据传输服务DTS提供的流式数据ETL(Extract Transform Load)功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务,并结合DTS的高效流数据复制能力,可以实现流式数据的抽取、数据转换和加工、数据...

产品更名公告

为了帮助阿里云用户更好地应对不断加剧的数据安全挑战,2021年01月28日,阿里云整合敏感数据保护(SDDP)等产品提升了数据安全防护能力,正式发布数据安全中心。原产品名称由敏感数据保护(SDDP)正式变更为数据安全中心(DSC)。如给您...

流式ETL

数据传输服务DTS提供的流式数据ETL(Extract Transform Load)功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务,并结合DTS的高效流数据复制能力,可以实现流式数据的抽取、数据转换和加工、数据...

应用场景

实时数据流场景 DataFlow集群类型提供了Flink、Kafka、Paimon等服务,主要用于解决实时计算端到端的各类问题,广泛应用于实时数据ETL和日志采集分析等场景。通过采集程序将业务数据、日志和埋点数据等投递到EMR Kafka,利用Flink的实时计算...

应用场景

实时数据建模:提供了实时数据建模聚合表,以支持实时聚合能力。强大的引擎和优化器保证了数据库在实时数据建模时的高效性。实时更新:采用了delete-and-insert的实时更新策略,且在读取时无需进行主键合并,相较于采用了merge-on-read...

使用场景

实时数据处理 DMS任务编排可以设置定时任务,实现对实时数据的处理和分析。业务流程自动化 结合DMS任务编排的调度和依赖管理功能,可以实现业务流程的自动化处理,提高工作效率和数据处理的准确性。数据治理与数据管控 DMS任务编排提供了...

安全配置常见问题

本文为您介绍MaxCompute的安全配置常见问题。问题类别 常见问题 数据安全 ...更多数据保护信息,请参见 数据保护机制。如何找回被删除的表?MaxCompute提供的备份恢复功能可以帮助您恢复表数据,更多备份恢复信息,请参见 备份与恢复。

安全操作

MaxCompute提供项目数据保护机制,为数据安全提供保障。本文为您介绍常用安全操作命令。安全操作常用命令如下。详细安全相关操作请参见 安全参数列表。类型 功能 角色 操作入口 开启项目数据保护 开启项目的数据保护机制。项目Owner或授予...

数据保护机制

本文为您介绍MaxCompute的数据保护机制以及开启数据保护机制后数据的流出策略。背景信息 部分公司对数据安全非常敏感,例如,只允许员工在公司内部进行操作、禁用公司所有电脑上的USB存储接口。这样做的目的是禁止员工将敏感数据泄漏出去。...

ETL工具支持概览

支持的ETL工具见下,可以同时参见更详细的同步方案列表 数据迁移及同步方案综述:数据传输服务(DTS):阿里云提供的实时数据同步服务,可以将其他数据源(RDS MySQL,ECS自建MySQL,PolarDB等)实时同步数据到 AnalyticDB PostgreSQL版,...

配置数据保护规则

在使用全密态功能之前,您需要配置数据保护规则。RDS MySQL支持通过配置文件的方式管理数据保护规则,本文介绍配置数据保护规则的方法及相关API的使用说明。全密态数据库会将您配置的数据保护规则内容持久化到数据库内的系统表上(简称全密...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据传输服务 云数据库 Redis 版 数据库备份 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用