新增和使用独享数据服务资源组
网络连通与白名单配置 独享数据服务资源组与数据源之间进行数据服务时，需要确保独享数据服务资源组与不同网络环境数据源之间的连通性，独享数据服务资源组包括公网、阿里云VPC网络、IDC网络等场景的网络连通方案，不同连通场景下需要添加...
添加日志服务SLS数据源
在 选择已有数据源 列表中选择配置完成的日志服务数据源。在下方 查询 编辑框中输入查询参数。支持以JSON对象为查询参数进行查询。可填写的查询参数为：{"projectName":"test","logStoreName":"access-log","topic":"test","from":...
添加日志服务SLS数据源
在 选择已有数据源 列表中选择配置完成的日志服务数据源。在下方 查询 编辑框中输入查询参数。支持以JSON对象为查询参数进行查询。可填写的查询参数为：{"projectName":"test","logStoreName":"access-log","topic":"test","from":...
敏感数据溯源
DataWorks的数据溯源功能，支持通过提取数据泄露文件中数据的水印信息，帮助您定位到可能会泄露目标数据的责任人。本文为您介绍如何创建溯源任务，并通过该任务查找可能会泄露数据的责任人。前提条件 已创建 数据识别规则，详情请参见 配置...
资源规划和配置
连通性和性能 您在使用资源组时，需要关注资源组的连通性和性能两方面：连通性：发起API调用请求时，请求会下发至数据服务的服务器，并被进一步转发至数据源中执行数据查询，因此需要保证资源组可以访问相应的数据源及其所在的网络。...
IDaaS 术语表
产品相关 IDaaS Identity-as-a-Service，身份即服务，企业云身份管理中心，阿里云提供的云身份服务。 EIAM Enterprise Identity Access Management，企业员工身份管理系统、传统意义上的统一身份认证平台、IAM 系统、4A 平台。面向企业...
创建数据脱敏规则
参数 说明 数据水印 数据水印可提供数据溯源能力，发生数据泄露后，可帮您定位到可能的泄露源。您可根据需求选择是否开启 数据水印。说明 仅DataWork企业版及以上版本支持使用数据水印功能。脱敏特征值 不同脱敏特征值的脱敏策略规则不同，...
基本概念
本文将为您介绍数据服务的Dataphin数据源服务、API服务、分组、服务单元和应用等基本概念。基本概念 说明 Dataphin数据源 配置数据表生成Dataphin数据源。服务单元 对数据表进行统一的元数据配置。应用 消费数据服务（调用API或Dataphin...
配置数据源
使用数据服务创建API前，需先将您的数据库或数据仓库添加为DataWorks数据源，以此作为数据服务API的数据来源。开发数据服务API时，数据服务将访问该数据源获取数据表的Schema信息，帮助您进一步设置请求和返回参数。本文为您介绍如何配置...
资源组说明
资源组分类 资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按数据API的定义提供数据服务。按使用场景，资源组分为两类：系统资源组：由数据资源平台提供，供所有用户使用，对于QPS和并发有限制，...
数据服务
场景 数据服务资源组类型 独享数据服务资源组 公共数据服务资源组 实例模式 同租户访问RDS 数据服务API能够正常编辑和保存 数据服务API能够正常编辑和保存 跨租户访问RDS 数据服务API能够正常编辑和保存 保存API时报错：存在安全风险，需要...
资源组说明
资源组分类 资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按数据API的定义提供数据服务。按使用场景，资源组分为两类：系统资源组：由企业数据智能平台提供，供所有用户使用，对于QPS和并发有...
独享数据服务资源组
为保证用户创建并封装在数据服务中的API在被外部应用调用时，能达到高QPS以及满足可用性保障，企业需要使用独享数据服务资源以确保调用的高效和可靠。独享数据服务资源给用户提供了专属的计算资源和环境隔离，提升企业高并发接口处理效率，...
计费逻辑说明
软件费用明细：版本服务 数据建模 DataWorks支持使用智能数据建模和DATABLAU数据建模两种产品构建数据模型，您可以根据业务需求选购合适产品使用。软件费用明细：数据建模 增强分析 DataWorks增强分析提供卡片和报告功能，您无需下载数据，...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
使用公共资源组
开通DataWorks时，DataWorks自动为您提供公共资源组（包括公共调度资源组、公共数据集成（调试）资源组、公共数据服务资源组），可用于数据开发、运行测试等操作。公共资源组被多个租户共享，高峰期租户间可能会存在抢占资源的情况。本文为...
配置数据源网络
本文主要介绍Serverless Spark如何配置数据源网络来访问用户VPC网络中的数据。这些数据包括RDS系列、ADB系列、PolarDB系列、MongoDB、Elasticsearch、HBase、E-MapReduce、Kafka以及用户在ECS上自建的各种数据服务等。背景信息 Serverless ...
DataWorks on EMR Serverless StarRocks最佳实践
数据服务 数据服务支持生成StarRocks数据源类型的API。说明 您也可以通过在DataWorks创建MySQL数据源的方式，封装兼容MySQL生态的StarRocks类型API。进入数据服务页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据服务...
通用参考：按量付费转包年包月
独享数据集成资源组：网络连通方案 独享调度资源组：网络连通方案 独享数据服务资源组：网络连通方案。使用资源组 资源组绑定工作空间：资源组购买完成后，您需要为资源组绑定所需工作空间。独享数据集成资源组：绑定归属工作空间 独享调度...
功能特性
数据传输服务DTS（Data Transmission Service）是阿里云提供的一种支持关系型数据库、NoSQL、OLAP等多种数据源之间数据交互的数据服务。它提供了数据迁移、实时数据订阅及数据实时同步等多种数据传输能力。通过数据传输可实现不停服数据...
DataWorks资源组概述
资源组介绍 DataWorks包括独享资源组、公共资源组，各资源组根据任务调度、数据集成、数据服务等不同的使用场景，细分为不同类型的资源组，包括：独享调度资源组、独享数据集成资源组、独享数据服务资源组、公共调度资源组、公共数据服务...
购买与使用独享数据传输服务资源组
检查网络与地域条件 购买使用独享数据服务资源组前，您需要检查当前的网络和地域条件是否满足要求，独享输出传输服务资源组在数据传输上对网络和地域有以下限制：只支持云上VPC网络访问，暂时不支持公共网络访问。只支持同地域的数据传输...
功能更新动态（2022年之前）
数据服务 数据服务规格拓展，规格包括api.base（最大500 QPS）、1api.s1.small（最大2500 QPS）、api.s1.medium（最大5000 QPS）、api.s2.large（最大10000 QPS）。开通Dataphin 和 升级。自动续费 新增自动续费功能，帮助您快速地续费...
日志服务通过数据集成投递数据
数据源名称 选择以添加的日志服务数据源名称。资源组 选择独享数据集成资源组。数据去向 选择MaxCompute。数据源名称 选择以添加的MaxCompute数据源名称。测试网络连通性，数据来源和数据去向均可连通后，点击 下一步。配置数据来源与数据...
数据服务权限列表
Y 服务单元责任人：Y 非服务单元责任人：N N N 查看服务单元详情 Y 服务单元责任人：Y 非服务单元责任人：N N N 发布服务单元 Y 服务单元责任人：Y 非服务单元责任人：N N N 删除服务单元 Y 服务单元责任人：Y 非服务单元责任人：N N N ...
数据服务概述
数据服务基于Serverless架构，您无需关注服务器、网络等运行环境相关的基础设施，只需专注于API的定义、数据的查询逻辑，从而避免传统架构带来的运维成本开销。数据服务与API网关（API Gateway）完全集成，支持您将数据服务快速发布到API...
配置HBase数据源网络连通
HBase和独享数据服务资源组在不同VPC中 step1：配置VPC间网络连通 当Hbase和独享数据服务资源在不同VPC中时，您需要通过VPN网关等方式，将两个VPC间的网络打通，不同场景下的VPC间网络连通方案请参见 获取白名单IP地址：独享数据服务资源组...
创建ClickHouse数据源
进行数据同步：DataWorks的数据集成模块为您提供读取和写入数据至ClickHouse的能力，您可将其他数据源的数据同步至当前ClickHouse数据源，或将当前ClickHouse数据源的数据同步至其他数据源。您可通过离线同步场景执行相关数据同步操作。增...
配置网络
为了实现应用与数据服务之间的网络互通，在您开始调用API或Dataphin数据源前需要配置网络。本文为您介绍如何查看域名。查看域名 您可以关闭已开通的域名。您可以打开或关闭域名显示开关（图标），可以管控非超级管理员查看域名的权限。请...
DataWorks On Hologres使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
文档更新动态（2022年之前）
新功能 网络连通解决方案 2021年08月24日 数据服务：支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度有要求的业务场景，Dataphin支持为项目添加加速计算源，且完成Dataphin数据源开发后，您可以手动...
一键建仓
数据管理DMS一键建仓功能可以实现一键创建实时同步的数据仓库，数据可在秒级的延迟下，同步至AnalyticDB MySQL版数据库中，帮助您更实时、准确地掌握业务情况，以便更好地进行业务分析和决策，提升业务效果。本文介绍如何在数据管理DMS中...
创建DataHub数据源
背景信息 DataHub即阿里云流式数据服务DataHub，如果您使用的是阿里云流式数据服务DataHub，在对接Dataphin进行数据开发时，您需要先完成DataHub数据源的创建。更多DataHub信息，请参见 产品概述。权限说明 Dataphin仅支持 超级管理员、...
创建DataHub数据源
背景信息 DataHub即阿里云流式数据服务DataHub，如果您使用的是阿里云流式数据服务DataHub，在对接Dataphin进行数据开发时，您需要先完成DataHub数据源的创建。更多DataHub信息，请参见 DataHub的产品概述。使用限制 Dataphin仅支持超级...
异构数据源访问
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源（HDFS、Hive和JDBC）时，可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
发展历程
2022年 自研一体化大数据计算平台和数据仓库产品ODPS获世界互联网领先科技成果奖。在TPCx-BB 100TB标准测试中，连续6次获得全球冠军，保持性能和性价比第一。Forrester：每两年一次的全球云数仓评测中，进入卓越表现者象限，国内唯一。进入...
PolarDB-X 1.0同步至DataHub
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB-X 1.0 同步至 阿里云流式数据服务DataHub。前提条件 已开通 DataHub 服务，并且已创建用作接收同步数据的Project。具体的操作请参见 快速入门、Project操作。...
自建Oracle迁移至DataHub
阿里云流式数据服务DataHub 是流式数据（Streaming Data）的处理平台，提供对流式数据的发布、订阅和分发功能，让您可以轻松构建基于流式数据的分析和应用。本文介绍如何使用数据传输服务DTS（Data Transmission Service）将自建Oracle迁移...
自建Oracle同步至DataHub
本文介绍如何使用数据传输服务DTS（Data Transmission Service）将自建Oracle同步至 阿里云流式数据服务DataHub。前提条件 已创建源自建Oracle数据库和目标实例 阿里云流式数据服务DataHub，且自建Oracle数据库的版本为19c、18c、12c、11g...
RDS SQL Server迁移至DataHub
数据传输服务DTS（Data Transmission Service）支持将 RDS SQL Server 迁移至 阿里云流式数据服务DataHub。前提条件 确认DTS是否支持该版本的 RDS SQL Server 实例。支持的版本，请参见 迁移方案概览。已开通 DataHub 服务，并且已创建用作...
- 产品推荐
- 这些文档可能帮助您