文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
医疗
发版上线实现秒级更新：业务开发完成后，在支付宝小程序 IDE 上一键发版提测。上线也只需在控制台手动发布版本即可，实现了秒级更新。客户价值 高效 前端开发规范得到统一，不仅有利于代码的沉淀和管理，平台能力也得以不断丰富，几天时间...
必读：简单模式和标准模式的区别
绑定后不同工作空间模式下，DataWorks模块对应操作的数据源如下表所示：DataWorks模块 标准模式 简单模式 数据开发 操作开发环境数据源（实例，项目、数据库）操作生产环境数据源（实例，项目、数据库）运维中心 开发环境运维中心：操作...
接入方式简介
该方式适用于大型多人并行开发项目。使用 组件化方式，需要引入 mPaaS gradle 打包工具，对 gradle 版本以及 com.android.tools.build:gradle 版本有一定的要求。如何选择接入方式 如果使用 mPaaS 需要像使用其他 SDK 一样简单接入并使用，...
流程管控
DataWorks提供了全链路的数据开发治理能力，为您提供了统一的数据开发治理流程，同时也支持您在DataWorks的默认流程上基于自己的业务需求在关键的流程节点进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景...
快速体验
涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集、加工、质量监控，以及数据可视化展现，您需提前开通该服务。详情请参见 开通DataWorks服务。云原生大数据计算服务MaxCompute 实现底层加工...
规划工作空间
例如：“季度销售冲刺战役”、“春季安全生产大检查”或“高管驾驶舱报表”等。各业务项目涉及多个横向部门，对接多个业务系统的数据，汇总加工，形成数据产出。按照数仓的层级结构划分工作空间，每一层可以有独立的一个或多个工作空间。...
ETL工作流快速体验
教程（点击链接快速体验）涉及产品 涉及模块 DataWorks版本要求 模板描述 网站用户行为分析 DataWorks MaxCompute MYSQL（无须开通）OSS（无须开通）数据集成 数据开发 基础版 揭秘用户行为，驱动业务增长！该案例将通过数据分析技术，解析...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
准备环境
步骤一：创建OSS Bucket 本教程需要您创建一个OSS Bucket，后续会将用户信息和网站访问日志信息同步到OSS Bucket中，用于数据建模和数据分析。登录 OSS控制台。在左侧导航栏，单击 Bucket列表，在Bucket列表页面，单击 创建Bucket。在 创建...
开发管控：管理者
作为工作空间的管理者，在使用数据开发（DataStudio）时，您可以针对用户的开发行为实施有效的管控措施，进行开发流程、数据安全、审计等相关操作，本文将帮助您快速掌握DataStudio的相关功能，实现对数据开发过程的有效管控。背景信息 ...
MaxCompute数据权限控制详情
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户，拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限，但默认无生产权限，本文为您介绍预设角色权限基本情况、MaxCompute权限...
注册CDH或CDP集群至DataWorks
DataWorks提供了与CDH（Cloudera’s Distribution Including Apache Hadoop，以下简称CDH）和CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，您可在DataWorks中注册CDH及CDP集群，进行任务开发、调度、数据地图（元数据管理）...
数码管
数码管组件通过配置发光颜色展示数字。本文介绍组件的详细配置方法。使用说明 数码管组件支持实时更新的Topic如下表格所示。名称 Topic 说明 设备属性上报/${productKey}/${deviceName}/thing/event/property/post 通过该Topic获取设备上报...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
数据开发概述
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
开发部署扩展程序：函数计算方式
权限说明 开放平台管理员 和 租户管理员 拥有 开发者后台 的读写权限，其他租户级角色、空间级角色仅拥有开发者后台的只读权限。详情请参见 全局级模块权限控制。仅支持阿里云主账号或者拥有 AliyunDataWorksFullAccess 权限的RAM用户进行...
开发部署扩展程序：自建服务方式
权限说明 开放平台管理员 和 租户管理员 拥有 开发者后台 的读写权限，其他租户级角色、空间级角色仅拥有开发者后台的只读权限。详情请参见 全局级模块权限控制。仅支持阿里云主账号或者拥有 AliyunDataWorksFullAccess 权限的RAM用户进行...
DataWorks On Hologres使用说明
创建Hologres数据源 开发前准备：绑定数据源或集群 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发，您需执行如下操作：需将进行协同开发的RAM用户添加为当前工作空间的成员，并授予其开发角色。将工作空间成员添加至...
DataWorks On MaxCompute使用说明
节点代码定义：MaxCompute语法 创建并使用MaxCompute表 开发ODPS SQL任务 引用SQL组件 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发ODPS Script任务 开发ODPS MR任务 创建并使用MaxCompute资源 创建并使用自定义函数 您可...
DataWorks On CDP/CDH使用说明
新增和使用独享调度资源组 二、开发环境准备 您需先在DataWorks工作空间注册 CDP或CDH 集群，才可在数据开发（DataStudio）进行数据开发工作，并以工作空间为单位管理空间成员，以便进行协同开发。类别 描述 相关文档 数据同步环境准备 ...
服务条款
欢迎您申请试用云开发平台服务 在您申请试用阿里云云开发平台服务之前，请您仔细阅读 www.aliyun.com 网站上公布的相关规范、规则和使用流程以及阿里云云开发平台免费试用服务协议的全部内容，特别是免除或者限制责任的条款、争议解决和...
扩展程序概述
产品能力 DataWorks作为阿里云一站式大数据开发与治理平台，在各项能力支持上预设了很多拓展点，例如，在标准模式下，简略来看，节点创建后完成代码开发后，需先提交到开发环境中进行验证，完成后再正式发布到生产环境中，后续每天根据调度...
DataWorks on EMR权限管控说明
DataWorks功能模块使用权限 在DataWorks运行EMR任务时，您需要拥有DataWorks数据开发（DataStudio）、数据地图、数据质量、智能监控等功能模块的使用权限，以便执行开发任务及开发后的运维、质量管控操作。DataWorks功能模块权限，详情请...
产品架构
多端低代码开发平台魔笔（以下简称魔笔）以独立应用（独占云资源）作为标准化输出。支持开发者通过使用搭建平台，利用各类物料开发应用，完成对应用的搭建、运维、运营等全生命周期的管理。架构图 魔笔 产品架构图如下所示。平台：应用全...
绑定交互式分析实例
Hologres实例名称 下拉框可选 无 数据库名 需要绑定的DB名 当前建议绑定开发环境的DB 服务器 Hologres实例的网络地址 实例选择后自动生成 端口 Hologres实例的网络地址 实例选择后自动生成 连通性测试 测试是否连通 无 进入HoloStudio开发 ...
移动网关简介
移动网关服务（Mobile Gateway Service，MGS）是移动开发平台（mPaaS）提供的连接移动客户端与服务端的组件产品。该组件简化了移动端与服务端的数据协议和通讯协议，能够显著提升开发效率和网络通讯效率。功能特点 移动网关是连接移动客户...
系统管理
注意事项 建表策略管理：在DataWorks智能数据建模开启建表策略的工作空间（包含建模空间及其纳管的所有研发空间）下，使用数据开发（DataStudio）新建表或修改表时，如不符合所配置的建表策略，则创建的表执行提交、发布操作时会受阻。...
创建Hologres外部表
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 业务流程。如果您已有 业务流程，则可以忽略该步骤。鼠标悬停至 图标，选择 新建业务流程。在 新建业务流程 ...
创建Hologres内部表
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 业务流程。如果您已有 业务流程，则可以忽略该步骤。鼠标悬停至 图标，选择 新建业务流程。在 新建业务流程 ...
环境管理
多端低代码开发平台魔笔针对研发流程中测试和上线环节，提供资源隔离的开发环境和生产环境，支持对各环境的管控操作，包括环境运行状态管理和启停操作。环境介绍 多端低代码开发平台魔笔 针对研发流程中的开发、测试和上线环节，提供资源...
MaxCompute数据访问权限控制
背景信息 DataWorks通过空间预设角色与空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户拥有该角色映射的开发引擎Role权限，但默认无生产权限。您可通过DataWorks安全中心实现MaxCompute数据权限管控。应用场景 场景 同...
新功能发布记录
本文介绍物联网应用开发（IoT Studio）功能和文档的动态。2024年01月 Web可视化开发和移动可视化开发 功能名称 功能描述 发布时间 相关文档 组件交互 动作执行模式默认 同时执行，新增 按顺序执行。2024-01-29 交互配置 2023年12月 项目...
DataWorks On EMR使用说明
新增和使用独享调度资源组 二、开发环境准备 您需先在DataWorks工作空间注册EMR集群，才可在数据开发（DataStudio）进行数据开发工作，并以工作空间为单位管理空间成员以便进行协同开发。类别 描述 相关文档 注册EMR集群 基于DataWorks进行...
权限管理与规范化数据开发
空间级别-开发角色：可以做任务开发的工作，如DataStudio任务开发、数据服务开发、DQC配置等。空间级别-运维角色：负责配置资源与任务部署，如配置数据源、发布任务。空间级别-部署角色：仅负责发布任务。空间级别-模型设计师角色：仅能...
实现开发生产等多套环境隔离
使用DataWorks进行大数据开发时，支持对开发、测试、生产等环境进行隔离，当您联合使用了其他阿里云产品时，也可根据环境隔离诉求进行对应业务的环境设置与隔离，本文以DataWorks联合EMR、OSS等产品为例，为您介绍如何实现开发生产等多套...
DataWorks准备工作流程
DataWorks是为您提供专业高效、安全可靠的一站式大数据开发与治理平台，使用其进行数据开发前，您需做好相关准备工作，保障后续开发任务可顺利执行。本文为您介绍DataWorks的购买及环境准备流程，帮助您快速开通DataWorks并准备所需开发...
工作空间概述
后续：开始数据开发 创建工作空间并分配空间成员角色权限后，您可根据各角色定义的权限前往数据开发DataStudio模块开始数据开发工作，数据开发模块的入门教程详情请参见：数据开发：开发者。相关文档 在阅读工作空间的概述后，若您想创建...
数据治理中心概述
数据治理中心可自动发现平台使用过程中数据存储、任务计算、代码开发、数据质量及安全等维度存在的问题，并通过健康分量化评估，从全局、工作空间、个人等多个视角，以治理报告及排行榜呈现治理成果，帮助您高效达成治理目标。同时，提供...
概述
阿里云DataWorks联合建模工具DDM（Datablau Data Modeler）为您提供一体化的数据建模解决方案（DATABLAU），将数据模型设计管控、引标落标等能力融入DataWorks规范化开发流程，助力用户实现数据资产价值化输出，在数据全生命周期上夯实数据...
- 产品推荐
- 这些文档可能帮助您