什么是DataWorks
从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与数万名政务、央国企、金融、零售、互联网、能源、制造、工业等行业的客户携手，不断提升数据应用效率，助力产业数字化升级。产品架构 DataWorks十多年...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
空间数据（邀测中）
入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库，方便对空间数据库进行空间检索、数据质检、血缘记录，打通数据...，使得空间数据被用于数仓建设、标签管理等数据中台任务...
功能简介
入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库，方便对空间数据库进行空间检索、数据质检、血缘记录，打通数据...，使得空间数据被用于数仓建设、标签管理等数据中台任务...
统一服务
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”的传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
客户案例
基于飞天大数据平台产品DataWorks+MaxCompute大大提高了数据业务的开发效率，构建大润发的数据中台体系。新金融行业：某互联网金融公司湖仓一体案例 客户架构如下。客户简介 公司的第一代数据湖是基于Hadoop+OSS搭建的，同时引入的数据中台...
将云消息队列 Kafka 版的数据迁移至MaxCompute
在数加（一站式大数据平台）中，DataWorks控制台即为MaxCompute控制台。MaxCompute和DataWorks一起向用户提供完善的数据处理和数仓管理能力，以及SQL、MR、Graph等多种经典的分布式计算模型，能够更快速地解决用户海量数据计算问题，有效...
添加 Oracle 数据源的白名单
复制 OMS 控制台 添加数据源 对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的 访问规则>入方向 区域，单击 快速添加。您也可以选择 手动添加，手动输入 端口范围、授权对象 等信息。在 快速添加 对话框，粘贴复制...
添加 MySQL 数据源的白名单
复制 OMS 控制台 添加数据源 对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的 访问规则>入方向 区域，单击 快速添加。您也可以选择 手动添加，手动输入 端口范围、授权对象 等信息。在 快速添加 对话框，粘贴复制...
添加 OceanBase 数据源的白名单
复制 OMS 控制台 新建数据源 对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的 访问规则>入方向 区域，单击 快速添加。在 快速添加 对话框中，粘贴复制的 IP 地址至 授权对象，任意选择一个 端口范围。单击 确定。
添加 Kafka 数据源的白名单
复制 OMS 控制台 添加数据源 对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的 访问规则>入方向 区域，单击 快速添加。您也可以选择 手动添加，手动输入 端口范围、授权对象 等信息。在 快速添加 对话框，粘贴复制...
添加 Oracle 数据库的白名单
复制 OMA 控制台 选择源端数据库类型 对话框中显示的 OceanBase 数据评估服务器的 IP 地址段。在安全组详情页面的 访问规则>入方向 区域，单击 快速添加。您也可以选择 手动添加，手动输入 端口范围、授权对象 等信息。在 快速添加 对话框...
添加 MySQL 数据库的白名单
复制 OMA 控制台 选择源端数据库类型 对话框中显示的 OceanBase 数据评估服务器的 IP 地址段。在安全组详情页面的 访问规则>入方向 区域，单击 快速添加。您也可以选择 手动添加，手动输入 端口范围、授权对象 等信息。在 快速添加 对话框...
添加数据源概述
进入 DataV控制台，单击 我的数据，可以对接入的数据源进行统一管理。DataV支持以下数据源的接入。数据源类型 数据源 说明 数据库类 说明 如果您在其它地域，或者没有使用阿里云数据库，想连接自建数据库，那就需要暴露数据库的公网IP进行...
设置集群白名单
创建 PolarDB PostgreSQL版 数据库集群后，您需要设置PolarDB集群的IP白名单，并创建集群的初始账号，才能连接和使用该集群。注意事项 默认情况下，IP白名单只包含IP地址127.0.0.1，表示任何IP地址均无法访问该数据库集群。若将IP白名单...
添加 ADB 数据源的白名单
本文为您介绍如何添加云原生数据仓库 AnalyticDB MySQL 版...复制 OMS 控制台 添加数据源 对话框中显示的 OceanBase 数据传输服务器的 IP 地址，将其添加在 修改白名单分组 对话框。设置白名单后，新的白名单将于 1 分钟后生效。单击 确定。
云数据库MongoDB版（分片集群架构）间的双向同步
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
设置白名单
创建 PolarDB MySQL版 数据库集群后，您还需要设置集群的IP白名单，并创建集群的初始账号，只有已添加到白名单中的IP地址或安全组中的ECS实例才能访问该集群。本文将介绍如何设置IP白名单。使用场景 IP白名单指允许访问 PolarDB MySQL版 ...
设置集群白名单
注意事项 默认情况下，IP白名单只包含IP地址 127.0.0.1，表示任何IP地址均无法访问该数据库集群。若将IP白名单设置为%或者 0.0.0.0/0，表示允许任何IP地址访问数据库集群。该设置将极大降低数据库的安全性，如非必要请勿使用。PolarDB暂不...
数仓规划概述
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...
常见报错
如果源数据库为MySQL，您可以使用MySQL客户端连接源数据库，执行以下SQL语句进行检查，检查输出结果中的授权IP地址列表中是否允许远程访问。SELECT host,user,authentication_string,password_expired,account_locked FROM mysql.user ...
从自建TiDB全量迁移至RDS MySQL
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
设置白名单
警告 可以在组内白名单中填写IP地址（如192.168.0.1，表示允许192.168.0.1的IP地址访问私有RDS）或IP段（如192.168.0.0/24，表示允许从192.168.0.1到192.168.0.255的IP地址访问私有RDS）。多个IP地址或IP段间用英文逗号（,）隔开（如192....
OSS数据安全防护最佳实践
DSC 在您完成数据源识别授权后，从您存储在OSS的海量数据中快速发现和定位敏感数据，对敏感数据分类分级并统一展示，同时追踪敏感数据的使用情况，并根据预先定义的安全策略，对数据进行保护和审计，以便您随时了解OSS数据资产的安全状态。...
添加用户和数据源
说明 如果选择的实例是第一次作为数据源，需要单击 一键添加白名单 将企业数据智能平台的IP地址添加到 AnalyticDB PostgreSQL版 实例的白名单中。数据库 输入如要管理的数据库名称，如何创建数据库，请参见 数据库管理。本次快速入门教程...
添加开源Elastic Search数据源
注意 该地址是需要DataV服务器能够通过公网或阿里云部分Region内网访问您数据源的域名或IP地址。用户名 登录数据源的用户名。密码 登录数据源的密码。端口 数据源设置的端口。配置成功后，系统会自动进行测试连接。信息填写完成后，单击 ...
从自建Oracle迁移至阿里云RDS MySQL
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移的目标实例所属地域。单击页面右上角的 创建迁移任务。配置...
添加开源Elastic Search数据源
在 工作台 页面中，将鼠标移动至需要编辑的数据看板上，单击 编辑。重要 如果您的 工作台 页面内还没有创建任何数据看板，请参见 使用模板创建PC端看板，创建一个数据看板。在画布编辑页面，单击画布中的某一组件。如果画布中还没有组件，...
从RDS MySQL迁移至自建Kafka
Kafka是应用较为广泛的分布式、高吞吐量、高可扩展性消息队列服务，普遍用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域，是大数据生态中不可或缺的产品之一。通过数据传输服务DTS（Data Transmission Service），...
从自建Oracle迁移至阿里云RDS MySQL
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移的目标实例所属地域。单击页面右上角的 创建迁移任务。配置...
SQL审计
云原生数据仓库AnalyticDB PostgreSQL版 控制台提供SQL审计功能，SQL审计会统计数据库中所有的DML和DDL操作信息。您可通过SQL审计查看SQL明细、定期审计SQL。开通SQL审计功能后，实例性能不会受到影响。注意事项 SQL审计记录的保存时间为14...
Quick BI如何接入TSDB
背景信息 为避免因数据源白名单限制导致数据对接访问失败，您需将Quick BI不同网络环境下的IP地址段添加至数据源的白名单中，更多对接配置详情请参见 设置网络白名单。操作步骤 验证数据源连接并创建数据源。登录Quick BI控制台，操作详情...
添加白名单
为保证数据源的数据库的安全稳定，大部分数据源开启了白名单的限制（例如，RDS、MongoDB和Redis等常见的数据源），此种场景下，您需要将DataWorks资源组的IP地址或网段添加至数据源的白名单中，对数据集成资源组的访问IP放行。添加白名单时...
跨阿里云账号备份恢复数据
DBS IP地址段 以上部分配置中DBS地址段为专线接入阿里云VPC所在地域对应的DBS地址段，目前各个地域支持通过专线进行数据库迁移的DBS IP地址段如下：地域 DBS IP地址段 华东1（杭州）100.104.217.0/24 华北2（北京）100.104.119.0/24 华北1...
Sugar BI连接MaxCompute
在MaxCompute项目的IP白名单中添加如下IP：183.240.92.0/24,111.45.0.0/22,14.215.188.4/25 说明 添加IP白名单操作详情请参见 添加IP白名单，不添加如上IP会导致Sugar BI无法读取MaxCompute数据。步骤二：创建数据模型 连接完数据源后，...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
指定账号从特定IP地址访问数据库
数据库中如果存在用户名相同且绑定的主机IP等价（例如192.168.%和192.168.%.%）的账号，系统无法保证鉴权顺序，可能导致访问异常。例如数据库中存在 user@192.168.%和 user@192.168.%.%两个账号，当您使用其中一个账号登录时，系统会随机...
他云/自建数据库录入
本文介绍如何将他云/自建数据库录入至数据管理DMS中。前提条件 支持录入的他云/自建数据库类型，请参见 支持的他云/自建数据库。已在他云/自建数据库的白名单中添加DMS的服务器访问地址。详细信息，请参见 设置IP白名单。目标数据库实例的...
恢复SQL Server逻辑备份
恢复目标数据库 数据库所在位置 本例中将备份集恢复至提前新建的 RDS实例 实例中，请确保目标数据库服务正在运行中，同时还支持恢复至如下数据库实例所在位置：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入...
- 产品推荐
- 这些文档可能帮助您