在EMR上使用Sqoop与数据库同步数据时的网络配置
ECS自建数据库 访问VPC网络的自建数据库跟VPC网络的RDS类似，EMR集群需要使用VPC网络，并且数据库ECS实例和EMR集群实例需要在同一个安全组内。云下私有数据库 有两种方式访问云下私有数据库，一种是绑定弹性IP（EIP）访问数据库的公网地址...
TestNetworkConnection
调用TestNetworkConnection接口，测试目标数据源与所使用资源组的网络连通性。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
雷达图
单击 添加过滤器，可在 设置数据源 面板配置数据过滤器脚本，详情请参见 使用数据过滤器。数据响应结果 展示数据请求的响应结果。当数据源发生改变时，可单击右侧的 图标，实时查看数据响应结果。交互面板 选中 启用，开启组件交互功能。当...
系统管理
上传数据至MaxCompute引擎：支持使用公共资源组及独享资源组，且需确保数据上传任务使用的数据源与所选资源组网络连通。所选独享资源组需绑定至待接收数据的表所在的DataWorks工作空间。上传数据至EMR Hive、Hologres引擎：仅支持使用独享...
访问Redis数据源
本文介绍如何使用AnalyticDB MySQL湖仓版（3.0）Spark通过ENI网络访问Redis数据。前提条件 已创建AnalyticDB MySQL湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。已创建数据库账号。如果您是通过阿里云账号访问，只需创建高...
云数据库MongoDB版数据安全最佳实践
网络隔离 使用专有网络 云数据库MongoDB版支持多种网络类型，推荐使用专有网络。专有网络是一种隔离的网络环境，安全性和性能均高于传统的经典网络。专有网络需要事先创建，详情请参见 创建专有网络。当MongoDB实例为经典网络时，您可以将...
数据服务概述
API开发流程 创建数据源并配置网络连通性 使用数据服务创建API前，需先将您的数据库或数据仓库添加为DataWorks数据源，以此作为数据服务API的数据来源。开发数据服务API时，数据服务将访问该数据源获取数据表的Schema信息，帮助您进一步...
数据服务入门
步骤一：创建数据源并配置网络连通性 使用数据服务创建API前，您需将数据库或数据仓库添加为DataWorks的数据源，并保障数据服务资源组与您的目标数据源网络连通，以便调用API时DataWorks可成功访问数据源。说明 DataWorks工作空间将集群或...
元数据采集的数据源有白名单访问控制时需要配置的白...
为保证您能正常使用数据地图的元数据采集和类目管理功能，您需要提前配置好白名单，将使用的DataWorks所在地域的IP网段添加至目标项目或数据库中，并为所使用的账号配置类目管理权限。本文为您介绍如何配置白名单及类目管理权限。背景信息 ...
新建实例场景下配置专有网络
云数据库MongoDB默认使用专有网络，云数据库MongoDB和专有网络必须在同一地域，有以下两种实现方式：如果云数据库MongoDB还没有创建，您可以先创建专有网络，然后在专有网络下创建MongoDB即新建MongoDB场景，本文主要介绍新建云数据库...
全景视角
阿里云DataWorks为您提供数据生产、数据使用、数据管理视角下的主要数据治理情况。您可以根据需求选择合适的视角，高效的进行数据治理工作。背景信息 为提高不同使用场景下的数据治理效率和质量，DataWorks为您提供以下视角：数据管理视角...
常见问题
什么情况下我需要使用数据湖构建？如何申请数据湖构建产品的公测资格？请使用阿里云 主账号 进行公测资格申请（请如实填写公司信息），审批通过后即可访问数据湖构建的控制台。注意，子账号无法申请产品公测权限。数据湖构建如何收费？公测...
新增和使用独享数据集成资源组
因此，您需要在保证网络连通的前提下，再使用数据集成，如果网络不通，会导致数据同步任务无法执行。独享数据集成资源组与数据源间的网络连通方案和白名单注意事项，详情请参见：独享数据集成资源组。说明 如果您暂无连通数据库实例的需求...
数据集成：全领域数据汇聚
支持在各类复杂网络环境下，连通数据源的网络解决方案，无论数据源在公网、IDC还是VPC内，均可使用DataWorks数据集成实现网络连通。支持安全控制与运维监控，保障数据同步的安全、可控。核心技术与架构 引擎架构 采用星形引擎架构，数据源...
购买流程
网络类型 数据校验任务使用的网络类型，固定为 专线。资源组 选择校验任务所属的资源组，相关介绍，请参见 什么是资源管理。购买量 链路数量 一次性购买数据校验任务的数量，默认为1，最大为99。单击 立即购买，根据提示完成支付流程。下...
资源规划和配置
您需要在保证网络连通的前提下，再使用数据服务；如果网络不通，会导致API调用请求无法执行。性能：执行API调用任务时，会占用资源组所在机器的CPU、内存和网络等资源。如果资源不足，会导致API调用异常、高频调用请求被限流，以及无法及时...
添加白名单
如果您用独享数据集成资源组同步同阿里云账号，同Region下的VPC环境数据库，您购买添加独享数据集成资源组后，还需完成网络配置和工作空间绑定，操作详情可参见 新增和使用独享数据集成资源组。如果您已完成网络连通配置，但资源组仍然无法...
功能特性
删除DBFS 删除数据库文件存储并停止计费 删除DBFS 修改DBFS实例规格 在使用数据库文件存储的过程中根据业务存储性能的要求，调整数据库文件存储的实例规格，实例规格越高，消耗的CPU和内存资源越多 实例规格说明 修改DBFS使用场景 在使用...
用户价值
业务应用方 应用开发 业务分析 使用数据资产获得业务价值 更便捷的使用数据和算法资源：通过统一服务，应用开发人员可以快速开发数据智能应用，提高智能应用开发效率，发挥数据价值。自主挖掘数据的业务价值：通过画像分析、业务模型编辑器...
业务视角管理：数据专辑
本文为您介绍如何创建并使用数据专辑，及数据专辑的管理等操作。使用限制 仅支持DataWorks专业版及以上版本使用数据专辑功能，低版本用户请先升级再使用该功能，详情请参见：DataWorks各版本详解。数据专辑目前仅支持管理MaxCompute表。...
配置MySQL输入
已配置数据同步资源组与数据库的网络连通，详情请参见 配置资源组与网络连通。使用限制 数据集成不支持同步MySQL只读库实例的数据。DataWorks的数据集成实时同步MySQL数据是基于实时订阅MySQL实现的，实时同步MySQL数据目前仅支持配置MySQL...
多账号统一管理
不支持被加入数据安全中心成员账号的ADB-PG资产使用数据安全中心提供的功能。成员账号费用说明：为成员账号下的资产开启数据识别和安全审计功能时，部分数据库产品读取数据和存储审计日志的费用，需要成员账号承担。费用详情，请参见 接入...
场景管理器
图表样式 场景管理器是3D地球的子组件，支持独立的样式、数据和交互配置，能够使用数据定义镜头位置，通过移动和缩放的动效展示球体的不同位置。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索配置面板中输入您需要...
数据脱敏能力概述
使用限制 您需购买DataWorks专业版及以上版本，才可使用数据脱敏管理功能。详情请参见 DataWorks各版本详解。您需先开启DataWorks项目空间的查询脱敏功能，开启后相关脱敏功能才会生效。详情请参见 安全设置与其他。说明 MaxCompute引擎层...
数据治理中心概述
使用限制 版本限制 目前仅支持DataWorks企业版及以上版本使用数据治理中心。DataWorks各版本介绍，详情请参见 DataWorks各版本详解；购买DataWorks，详情请参见 购买指引。地域限制 目前仅支持华北2（北京政务云）、华东2（上海金融云）、...
同步数据
详细操作步骤请参见 使用数据集成迁移数据至分析型数据库MySQL版。通过Kettle将关系型数据库、Hbase等NoSQL数据源，以及Excel、Access中的数据导入分析型数据库MySQL版中，详细操作步骤请参见 使用kettle将本地数据导入分析型数据库MySQL版...
数据分析概述
说明 如在2022年6月1日前未授权 数据分析师 角色权限，则在此之前仅具有 访客 及 自定义角色 的用户将无法继续使用数据分析产品。除 访客 及 自定义角色 外的其他角色，默认拥有数据分析产品操作权限，该类角色仍然可以正常使用数据分析...
RDS外部表
使用RDS数据源创建MaxCompute的外部表并加载数据 使用RDS数据源创建MaxCompute外部表的步骤如下：登录RDS数据库，执行建表语句并插入数据。操作详情请参见 通过DMS登录RDS数据库。建表示例如下：CREATE TABLE `rds_mc_external`(`id` int...
修改组件数据
如果您需要使用数据源为API，直接在数据配置栏输入API即可。具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。以模板画布中 轮播列表 组件为例，单击选中该组件后，在画布右侧...
数据迁移操作指导
数据迁移流程 通常，使用数据传输服务DTS（Data Transmission Service）执行数据迁移的操作，您需要经历如下步骤。操作流程 说明 1.准备工作概览 在使用DTS迁移数据前，您需要对源或目标数据库做一些准备工作，以满足DTS对环境的要求。2....
敏感数据保护概览
如果您有对敏感数据进行管控和脱敏的需求，可以使用 数据管理DMS 的敏感数据保护功能对数据库进行扫描，识别、脱敏和管理敏感数据。背景信息 通过敏感数据保护功能，可帮助企业及时有效地发现与识别敏感数据资产，避免敏感数据滥用，有效...
修改组件数据
如果您需要使用数据源为API，直接在数据配置栏输入API即可。具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。以模板画布中 轮播列表 组件为例，单击选中该组件后，在画布右侧...
概览
为了更好地指导您使用数据管理DMS（Data Management），DMS推出解决方案系列文档，旨在通过最佳实践（Step by Step）的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 DMS为在线流程化系统，可统一管理企业内...
什么是数据管理DMS
为什么选择数据管理DMS 全域数据资产：支持企业全域数据资产管理，提供贯穿数据生命周期的质量治理与安全治理，帮助企业快速地查找数据，高效地使用数据。数据集成：支持常见数据源的实时、离线数据集成，数据集成过程中支持灵活自定义数据...
使用方法
您可以使用数据过滤器，自定义数据过滤代码，实现数据结构转换、数据筛选展示和一些简单的计算。本文介绍新版DataV资产数据过滤器的使用方法。背景信息 新版数据过滤器与旧版过滤器相比，取消了全局过滤器的概念（即各可视化应用共享过滤器...
敏感数据溯源
解决方案：使用 数据水印 功能生成的水印信息需要提供充足的数据量，才能保证通过溯源任务还原出可靠的水印信息，进而定位出可能的数据泄露责任人。建议您使用数据量大于500条，并且不包含重复数据的文件进行溯源。原因二：被泄漏的数据非...
修改名单抽奖数据
如果您需要使用数据源为API，直接在数据配置栏输入API即可。具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。在 我的可视化 页面内，单击 名单抽奖 可视化应用，进入画布编辑...
修改名单抽奖数据
如果您需要使用数据源为API，直接在数据配置栏输入API即可。具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。在 我的可视化 页面内，单击 名单抽奖 可视化应用，进入画布编辑...
导出数据
未开通敏感数据保护的数据库实例，不可使用数据水印。文件水印：是指将标识信息通过一定方式嵌入到文件中，该水印信息数据使用者可以直接看到。在弹出的 生成工单成功 对话框中，单击 查看工单。在工单详情页 预检查 区域，确认 影响行数 ...
- 产品推荐
- 这些文档可能帮助您