创建单物理表服务单元
模式 模式用于定义服务单元读取的数据是来自开发数据源还是开发生产数据源。模式包括 Basic 和 Dev-Prod 模式：Basic：选择了Basic模式后，服务单元读取数据时您只能选择到生产数据源。Dev-Prod：选择了Dev-Prod模式后，服务单元读取数据时...
创建多物理表服务单元
模式 模式用于定义服务单元读取的数据是来自开发数据源还是开发生产数据源。模式包括 Basic 和 Dev-Prod 模式：Basic：选择了Basic模式后，服务单元读取数据时您只能选择到生产数据源。Dev-Prod：选择了Dev-Prod模式后，服务单元读取数据时...
数据服务
场景 数据服务资源组类型 独享数据服务资源组 公共数据服务资源组 实例模式 同租户访问RDS 数据服务API能够正常编辑和保存 数据服务API能够正常编辑和保存 跨租户访问RDS 数据服务API能够正常编辑和保存 保存API时报错：存在安全风险，需要...
CreateGADInstance-创建GAD实例
MySQL EngineVersion string 否 新建单元节点的数据库版本。取值：8.0 5.7 5.6 5.5 N 为 1~10的整数，代表第 N 个单元节点。一个 RDS 全球多活数据库集群中最多可以创建 10 个单元节点。8.0 DtsConflict string 是 新建单元节点在同步时...
CreateGADInstance-创建GAD实例
MySQL EngineVersion string 否 新建单元节点的数据库版本。取值：8.0 5.7 5.6 5.5 N 为 1~10的整数，代表第 N 个单元节点。一个 RDS 全球多活数据库集群中最多可以创建 10 个单元节点。8.0 DtsConflict string 是 新建单元节点在同步时...
CreateGadInstanceMember-创建Gad实例成员
MySQL EngineVersion string 否 新建单元节点的数据库版本。取值：8.0 5.7 5.6 5.5 N 为 1~10的整数，代表第 N 个单元节点。一个 RDS 全球多活数据库集群中最多可以创建 10 个单元节点。8.0 DtsConflict string 是 新建单元节点在同步时...
CreateGadInstanceMember-创建Gad实例成员
MySQL EngineVersion string 否 新建单元节点的数据库版本。取值：8.0 5.7 5.6 5.5 N 为 1~10的整数，代表第 N 个单元节点。一个 RDS 全球多活数据库集群中最多可以创建 10 个单元节点。8.0 DtsConflict string 是 新建单元节点在同步时...
数据服务：低成本快速发布API
DataWorks的数据服务功能模块是灵活轻量、安全稳定的数据API构建平台，旨在为企业提供全面的数据共享能力，帮助用户从发布审批、授权管控、调用计量、资源隔离等方面实现数据价值输出及共享开放。功能概述 作为数据仓库与上层应用系统间的...
表
表是MaxCompute的数据存储单元。它在逻辑上是由行和列组成的二维结构，每行代表一条记录，每列表示相同数据类型的一个字段。MaxCompute的表类似于传统关系型数据库中的表，可以存储结构化数据，并且使用SQL进行查询和分析。MaxCompute中...
查看资源用量大盘
资源用量大盘为您展示当前租户下已使用的数据处理单元总量和按任务类型分别统计的消耗趋势以及按项目粒度统计的消耗增量排行，帮助您了解数据处理单元的消耗情况以及时调整资源规格配置。本文为您介绍如何查看资源用量大盘。前提条件 需...
DataWorks on EMR Serverless StarRocks最佳实践
数据分析概述 数据服务 DataWorks的数据服务功能模块是灵活轻量、安全稳定的数据API构建平台，旨在为个人、团队与企业提供全面的数据服务与共享能力，帮助用户统一管理面向内外部的API服务。数据服务概述 数据地图 DataWorks的数据地图是在...
解决方案与客户案例
针对上层业务不同的服务类型提供UNIT和COPY两种数据同步策略：UNIT类型：每个单元部署独立的数据库系统，单元之间通过DTS进行数据【双向】实时同步，保持每个单元都有全量数据，每个单元均可进行读写操作，读写流量会根据业务定制的分流...
数据传输服务概述
数据传输服务是MaxCompute数据进出的最重要通道，其中包括适用于批量操作的普通Tunnel和适用于流式写入的Stream Tunnel，同时在所有Region提供免费限量使用的数据传输服务共享资源组，也提供数据传输服务（包年包月）独享资源组，供您采购...
解决方案与客户案例
中心化服务：强依赖中心单元的服务，流量都会被转发到中心单元，通过中心单元的服务访问中心单元的数据层。普通服务：不做任何改造的服务，在本单元内进行服务调用，并访问本单元的数据层。支持多活能力的主要服务类型是单元化服务，但是当...
审计日志
ChangeServiceOwner 转交数据服务的API、应用、Dataphin数据源、服务单元的负责人。归属我的 ConfigFunctionPermission 修改功能权限配置。ChangeFunctionPermissionOwner 转交功能权限。权限审计 AuthAuditExport 导出权限审计详情。系统...
LogHub（SLS）数据源
是 无 batchSize 一次从日志服务查询的数据条数。否 128 column 每条数据中的列名，此处可以配置日志服务中的元数据作为同步列。日志服务支持日志主题、采集机器唯一标识、主机名、路径和日志时间等元数据。说明 列名区分大小写。元数据的...
管理服务单元权限
如果您已购买了数据服务模块，即可基于Dataphin生成API。服务单元对数据表进行统一的元数据配置。在您生成API前，需要对数据表进行统一的元数据配置。如果您需要使用他人的服务单元生成API，则需要申请服务单元的使用权限。前提条件 已购买...
查看及管理服务单元
区域 描述 ① 搜索及筛选区 您可根据服务单元名称的关键字进行搜索，也可根据我的服务单元（包括我负责的和我参与开发的）、数据源、服务单元分组、服务单元类型、负责人进行精确筛选。② 列表区 为您展示服务单元名称、服务单元类型、服务...
教程概述
本文为您介绍当需要通过DataV展示海量数据的分析结果时，如何使用DataWorks的数据服务开发数据API，并快速在DataV中调用API，最终将来自MaxCompute的数据成果展示在DataV大屏中，数据开发到数据服务再到数据分析展现一气呵成。注意 本案例...
单元化介绍
单元（即单元化应用服务产品层的部署单元），是指一个能完成所有业务操作的自包含集合，在这个集合中包含了所有业务所需的所有服务，以及分配给这个单元的数据。单元化架构就是将单元作为部署的基本单位，在全站所有机房中部署多个单元，每...
配置数据源
使用数据服务创建API前，需先将您的数据库或数据仓库添加为DataWorks数据源，以此作为数据服务API的数据来源。开发数据服务API时，数据服务将访问该数据源获取数据表的Schema信息，帮助您进一步设置请求和返回参数。本文为您介绍如何配置...
什么是日志服务
地域（Region）地域是日志服务的数据中心所在物理位置。您可以在创建Project时指定地域，一旦指定之后就不允许更改。更多信息，请参见 开服地域。功能概览 日志服务包含以下功能模块，覆盖云原生观测与分析的多种业务场景。数据采集 支持...
数据服务
背景信息 数据服务提供了数据中台建设过程中的数据服务化能力，面向数据开发者提供覆盖各个加工阶段统一体验的、便捷的数据查询转服务、服务管理、服务运维能力；面向数据资产管理者提供服务的统计分析、服务用量统计分析，实现数据中台...
日志服务通过数据集成投递数据
前提条件 准备好相关的数据源，详情请参见 创建MaxCompute数据源。准备需要同步的来源表与目标表。背景信息 日志服务支持以下数据同步场景：跨地域的LogHub与MaxCompute等数据源的数据同步。不同阿里云账号下的LogHub与MaxCompute等数据源...
通过DataWorks数据集成迁移日志数据至MaxCompute
背景信息 日志服务支持以下数据同步场景：跨地域的LogHub与MaxCompute等数据源的数据同步。不同阿里云账号下的LogHub与MaxCompute等数据源间的数据同步。同一阿里云账号下的LogHub与MaxCompute等数据源间的数据同步。公共云与金融云账号下...
数据服务权限管理
本文为您介绍如何授权和回收应用权限、回收API权限、授权和回收服务单元权限及回收Dataphin数据源权限。应用权限授权 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 应用授权 对话框。在 应用授权 对话框，配置参数...
核心能力
统一数据服务封装 实时、离线、半结构化、非结构化、消息队列的数据服务封装。支持向导模式和SQL模式等的服务封装。简单身份认证和加密签名身份认证模式。数据服务调用流量管控。行业知识敏捷交付 工作组下API服务、模型、节点、场景、指标...
数据源管理常见问题
在添加数据对话框中，设置 类型，选择 DataV数据代理服务，域名 为数据代理服务的域名、端口 也是数据代理服务的端口，key 和 Secret 需要将数据代理服务的密钥复制粘贴过来即可。配置完成后，单击 获取数据列表，需要注意的是在配置连接...
数据源管理常见问题
在添加数据对话框中，设置 类型，选择 DataV数据代理服务，域名 为数据代理服务的域名、端口 也是数据代理服务的端口，key 和 Secret 需要将数据代理服务的密钥复制粘贴过来即可。配置完成后，单击 获取数据列表，需要注意的是在配置连接...
用户价值
数据服务更便捷：能够赋予数据以业务价值，让各级用户能够直观的理解数据，并以此为基础向应用输出多样、便捷的数据服务，不断提升数据面向业务的价值。数据应用更智能：提供面向业务人员的无代码业务模型构建能力和数据分析能力，大大降低...
创建DataHub数据源
背景信息 DataHub即阿里云流式数据服务DataHub，如果您使用的是阿里云流式数据服务DataHub，在对接Dataphin进行数据开发时，您需要先完成DataHub数据源的创建。更多DataHub信息，请参见 产品概述。权限说明 Dataphin仅支持 超级管理员、...
数据服务入门
DataWorks数据服务的主要目标是为个人、团队和企业构建统一的数据服务总线，帮助用户统一管理面向内外部的API服务。例如，您可以将查询数据表功能快速的生成对应的API，或将已有的API注册至数据服务平台进行统一发布和管理。本文以MySQL...
创建DataHub数据源
背景信息 DataHub即阿里云流式数据服务DataHub，如果您使用的是阿里云流式数据服务DataHub，在对接Dataphin进行数据开发时，您需要先完成DataHub数据源的创建。更多DataHub信息，请参见 DataHub的产品概述。使用限制 Dataphin仅支持超级...
添加阿里云Elastic Search数据源
填写Elastic Search数据服务项目信息。重要 为了让DataV服务能够使用Elastic Search数据源，需要让DataV获取阿里云Elastic Search数据服务的访问权限，从而获得关联的RAM角色。在 添加数据源 对话框中，单击 获取实例列表，在弹出的对话框...
创建服务项目分组
分组用于分类管理服务单元、应用、Dataphin数据源和API。在您开始创建API、调用API或创建Dataphin数据源前，首先需要创建用于管理服务单元、应用、Dataphin数据源和API分组。本文为您介绍如何创建服务单元、应用、Dataphin数据源和API的...
DataWorks数据服务对接DataV最佳实践
新建数据源 数据服务支持丰富的数据源类型，如下所示：关系型数据库：RDS、DRDS、MySQL、PostgreSQL、Oracle和SQL Server 分析型数据库：AnalyticDB NoSQL数据库：TableStore和MongoDB 登录 DataWorks控制台，单击左侧导航栏的 数据服务，...
快速体验
生成数据API 通过DataWorks的 数据服务 功能，将数据表快速生成API，并发布至网关统一管理，供第三方服务使用。数据展示：Quick BI 通过Quick BI搭建面向不同业务需求的可视化大屏，可视化展示数据结果，便于进行业务数据分析。操作演示...
数据加工过程卡点校验
本文为您介绍在线或离线业务系统的数据在生成过程中进行的卡点校验。在线系统卡点校验 在线业务系统产生的数据是数据仓库的重要数据来源。在线业务系统复杂多变，每次变更都会产生数据的变化。因此，数据仓库需要适应多变的业务发展，及时...
配置跨库Spark SQL节点
任务编排中的跨库Spark SQL节点，主要针对各类跨库数据同步和数据加工场景，您可以通过编写Spark SQL，完成各种复杂的数据同步或数据加工的任务开发。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、...
DAS Auto Scaling弹性能力
背景信息 为业务应用选择一个合适的数据库计算规格（CPU和内存），是每个数据库运维人员都会经常面临的一个问题。若规格选得过大，会产生资源浪费；若规格选的过小，计算性能不足会影响业务。通常情况下，运维人员会采用业务平稳运行状态下...
- 产品推荐
- 这些文档可能帮助您