流程管控
本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景信息 DataWorks的工作空间分为 标准模式和简单模式，不同模式工作空间下任务的开发流程存在一定差异，两种模式的数据开发流程示意如下。标准模式工作空间开发流程 简单模式...
数据开发概述
流程管控：任务在开发过程可结合数据开发（DataStudio）自带的 代码评审、冒烟测试 等功能，以及 数据治理中心 预设的检查项、开放平台 基于扩展程序实现自定义逻辑校验等功能，保障开发任务符合规范。说明 不同工作空间模式涉及的流程管控...
通用开发流程
若开发过程需使用资源，您可通过DataWorks可视化方式上传资源，并进行后续资源管理操作。说明 在DataWorks中支持新建资源的引擎，以及支持的资源类型，请以实际使用界面为准。创建并使用MaxCompute资源 创建和使用EMR资源 步骤四：新建调度...
技术架构选型
在数据模型设计之前，您需要首先完成技术架构的选型。本教程中使用阿里云大数据产品MaxCompute配合...MaxCompute作为整个大数据开发过程中的离线计算引擎。DataWorks则包括数据开发、数据质量、数据安全、数据管理等在内的一系列功能。
前期开发说明
软件开发完成日期距公司成立日期不足半年，且程序量较大，需要提供前期开发说明，可以以1个月一万行为标准。注意事项 软件的开发完成日期必须在企业成立日期之后，如距离企业成立日期较近，不符合一个合理的开发周期，需要提供前期开发说明...
概述
扩展能力是魔笔的核心特性，支持您在构建应用的过程中，通过自定义页面组件、自定义逻辑流、自定义模块等方式来扩展应用能力。扩展能力 自定义页面组件 如下场景可能需要自定义页面组件：您可以为自己的业务定制开发和维护一组标准的业务...
计算巢软件分销模式说明
软件 分销面临的问题和计算巢软件分销的解决方法 软件开发商与云分销商在合作过程中，存在需求和问题需要解决：云分销商需要触达更多的软件开发商来扩展业务，而软件开发商需要分销商的渠道来拓展用户。云分销商承接分销软件时，需要重复...
总览
在接入 mPaaS 进行开发的过程中，最常见的场景就是在已有的原生 Android 工程中接入 mPaaS 后再进行开发。场景介绍 在接入 mPaaS 进行开发的过程中，最常见的场景就是在已有的原生 Android 工程中接入 mPaaS 后再进行开发。故本教程也将...
什么是Web可视化开发
使用页面模板，可有效地简化物联网应用开发过程。应用发布后，可以为应用批量绑定设备。使用流程 创建Web应用：创建Web应用，使用编辑器进行Web应用开发。Web应用开发步骤，请参见：步骤一：在项目中创建开关遥控器产品 步骤二：搭建开关...
开发流程
开发过程中会涉及一些基本概念，详细说明请参见 基本概念。自定义页面组件在魔笔应用中的运行逻辑 流程简介 开发自定义页面组件的整体流程如下：前提条件 已安装v16.x版本的 Node.js，例如v16.16.0。操作步骤 本地安装离线版脚手架。单击...
开发阶段
开发过程中，开发人员必须保证代码的规范性、准确性。同时进行适当的单元测试，以便后续测试工作可以顺利开展。开发阶段的流程包括以下步骤：代码开发 该部分内容请参见 编码规范，编码时需要注意以下问题：层次分明、结构化强。增加必要...
项目分配与安全
在为企业级大数据平台创建项目时，建议您对ODS层、DWD及DWS层的数据按照业务板块的粒度建立项目，对于ADS层的数据...同时要为在数据开发过程中的资源使用赋权，并做好数据安全隔离。关于MaxCompute数仓安全和权限配置详情，请参见 安全模型。
迁移概述
其中，软件迁移支持迁移自研软件和开源软件：自研软件：指开发者开发的或者基于开源软件增强开发的软件。具体操作，请参见 源码迁移。开源软件：指开发者从开源社区下载未做源码修改的软件或者所使用操作系统生态中默认携带的软件。更多...
权限管理与规范化数据开发
本实践将基于DataWorks标准模式空间完成从“数据建模”到“数据生产”的基本流程，帮助您快速掌握规范化的数据体系建设流程，提升在数据开发过程中的规范性、安全性、稳定性。背景信息 DataWorks采取RBAC权限模型供用户管理DataWorks所有...
应用示例：数据开发过程触发事件检查
使用限制 扩展程序启用后，实际在数据开发过程中，扩展事件被触发后的消息通知与响应有以下限制。系统内置扩展程序启用后，暂时仅支持对ODPS SQL类的节点生效。即启用后，仅ODPS SQL类节点中相应扩展点事件被触发时，流程会被阻断，通过...
管理和编排组件
在后续开发过程中如果遇到类似需求，您可以直接使用该业务组件，而不需要从基本组件重新开始构建。配置组件属性。单击组件编排画布右上角的 组件定义，您可以参考以下步骤配置组件属性。在 属性 页签下的 属性定义 区域，您可以通过单击 ...
创建并使用PAI Designer
人工智能平台PAI的 可视化建模Designer，用于实现端到端的机器学习开发流程的可视化建模工具。DataWorks为您提供PAI Designer节点，方便您通过该算法节点载入Designer工作流，通过调度配置实现Designer工作流的周期性任务调度。前提条件 ...
扫描代码与合并模型
因此，平台要提供元数据和代码双向同步的能力，研发人员可以在开发过程中使用特定的注解新增、修改或删除模型元数据，开发完成后再上报到平台和平台上的元数据做合并，形成最终确定的元数据。说明 已发布的应用不支持代码扫描、模型差异...
开发部署扩展程序：自建服务方式
在DataWorks扩展程序中，您可以自定义逻辑以监管用户的操作行为，例如拦截和阻断不当行为，通过扩展程序对特定事件进行消息通知与流程管控。本文为您介绍如何通过自建服务开发部署扩展程序。权限说明 开放平台管理员 和 租户管理员 拥有 ...
开发计划
流程步骤 owner 备注 建立开发计划 产品 产品是计划管理员，负责建立和结束计划 埋点需求编辑、发布 产品 方案中的埋点需求加入开发计划 埋点开发 研发 线上仅流程，实际开发过程是离线的 埋点测试 测试 线上仅流程，提供测试工具，测试...
创建和使用EMR资源
DataWorks支持可视化创建EMR（E-MapReduce）JAR、EMR（E-MapReduce）FILE资源，用于上传提交自定义函数或开源MR示例源码作为资源，便于EMR 计算节点的数据开发过程中引用。本文为您介绍如何创建资源，并上传提交资源，为资源的使用做好前期...
环境准备
说明 DataWorks的工作空间分为 简单模式 和 标准模式：简单模式：指一个DataWorks工作空间对应一个引擎项目，无法设置开发和生产环境，只能进行简单的数据开发，无法对数据开发流程以及表权限进行强控制。标准模式：指一个DataWorks工作...
扩展程序概述
DataWorks通过OpenEvent能力为您提供消息推送订阅能力，同时您可以将服务程序注册为DataWorks的扩展程序，通过扩展程序来卡点并响应...更多扩展点的触发应用示例可参见 应用示例：数据开发过程触发事件检查、应用示例：运维中心触发事件检查。
设计阶段
将上述内容产出为 ETL文档 留存，ETL将作为后续开发流程的第一参考依据。调度设计 依赖设计 将ETL抽象为多个相互依赖的代码节点形成上下游依赖关系，要求如下：一个节点仅产出一张表，一张表仅由一个节点产出。下游节点的输入数据来自于...
示例：开发中心应用
因此，平台要提供元数据和代码双向同步的能力，研发人员可以在开发过程中使用特定的注解实现新增、修改或删除模型元数据，开发完成后再上报到平台与平台上的元数据做合并，形成最终确定的元数据。说明 在示例应用中，由于您没有向您开发的...
场景：工作空间模式升级（简单模式升级标准模式）
操作须知 升级工作空间模式前，您需先了解以下内容：了解简单模式与标准模式工作空间的区别，包括不同工作空间模式的物理形态、开发流程等差异，详情请参见 必读：简单模式和标准模式的区别。了解创建并绑定数据源的相关内容，详情请参见 ...
个人设置
警告校验 用于设置在代码开发过程中是否提供研发规范校验，将给出提示。代码提示 用于在输入代码时，提供如下智能提示：连续智能提示：智能感知输入目的，连续给出下一步输入提示建议。关键字：提示代码支持输入的关键字。语法模板：代码...
创建业务流程
您可以基于业务流程对应引擎分组下的数据开发节点来进行具体的数据清洗工作，例如MaxCompute引擎下的ODPS SQL节点，如果代码开发过程中需要用到资源或函数，DataWorks也支持您通过可视化的方式来创建资源节点、创建函数节点。说明 目前...
开发可视化应用监控树莓派状态
如果您想进一步体验IoT Studio的Web可视化和业务逻辑功能，可继续执行后续步骤，体验 监控机房温湿度 案例的开发过程。后续步骤 添加温湿度传感器，完成检测设备数据的目标，实现对机房温度和湿度环境参数的数据展示。为温湿度传感器定义物...
开发部署扩展程序：函数计算方式
扩展程序参数配置 DataWorks支持在扩展程序开发过程中使用参数来提高扩展程序开发和应用效率，在扩展程序代码开发时，将需要应用的参数添加至此处即可。您可直接使用DataWorks提供的典型应用场景的内置参数，也可自定义参数。支持添加多个...
MaxCompute数据访问权限控制
说明 DataWorks的 安全中心 为您提供默认的权限申请审批流程，同时也支持您在 审批中心 自定义审批流程。当您申请MaxCompute引擎表字段权限时，DataWorks会根据申请的表字段来识别需要进行哪种类型的审批流程。使用限制 目前仅支持申请...
材料填写注意事项
以下是控制台每个选项的填写注意事项，申请流程详见普通软件著作权申请流程教学：第一步：实名认证。一、软件信息 1、软件全称 注意事项及规则：应以软件/APP/系统/平台进行结尾，如果申请内容是小程序，可以以小程序结尾。软件全称应与...
创建Hologres数据源
后续操作 为保障您的开发过程更加顺畅，建议先阅读 DataWorks On Hologres使用说明，了解在DataWorks使用Hologres的开发流程、相关费用、环境准备、权限控制等内容。数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：...
创建MaxCompute数据源
后续操作 为保障您的开发过程更加顺畅，建议先阅读 DataWorks On MaxCompute使用说明，了解在DataWorks使用MaxCompute的开发流程、相关费用、环境准备、权限控制等内容。数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：...
数据开发与运维中心：数据加工
DataWorks的 数据开发（DataStudio）是数据加工的开发平台，运维中心 是智能运维平台，基于这两个功能模块，您可以在DataWorks上规范、高效地构建和运维数据开发工作流。功能概述 DataWorks的数据开发的亮点功能如下。DataStudio支持...
医疗
方案优势 客户端版本可快速迭代开发：在迭代开发过程中，客户端只需关注与“HTML5 / 小程序”的交互接口扩展，几乎实现了和客户端的“分离”开发。发版上线实现秒级更新：业务开发完成后，在支付宝小程序 IDE 上一键发版提测。上线也只需在...
数据开发：开发者
说明 目前DataWorks的节点分为数据同步类型节点与计算类型节点两大类，实际开发过程中，您通常需要先通过离线同步任务将业务数据库中的数据同步至数仓中，再通过DataWorks计算节点对数仓中的表数据进行清洗加工。创建节点。您可通过如下两...
功能简介
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发和运行调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化水平...
数据开发
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发、部署、调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化...
功能简介
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发和运行调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化水平...
- 产品推荐
- 这些文档可能帮助您