概述

DataWorks(数据工场,原大数据开发套件)是阿里云重要的PaaS(Platform-as-a-Service)平台产品,为您提供 数据集成、数据开发、数据地图、数据质量 和 数据服务 等全方位的产品服务,一站式开发管理的界面,帮助企业专注于数据价值的挖掘...

快速体验

DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站大数据开发管理能力,本文以一个零售电商行业的数仓搭建实验为例,为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现,帮助您深入了解阿里云...

修改变量

DATETIME、FILE、AUDIO、IMAGE、VIDEO 类型的取值需要特定表达生成,请参考 表达 中时间处理与媒体处理章节。异常说明 错误码 说明 解决方案 RESOLVE_FAILED 修改值中存在表达逻辑异常。添加自定义异常处理或检查表达中是否存在对...

创建变量

DATETIME、FILE、AUDIO、IMAGE、VIDEO 类型的取值需要特定表达生成,请参考 表达 中时间处理与媒体处理章节。变量名称 用于指定创建变量操作创建目标变量的名称标识,在后继操作中可以使用该变量名称。此对象标识类型与数据类型设置的...

数据开发与运维中心:数据加工

核心技术架构 高效、规范的开发流程 说明 DataWorks提供标准模式的工作空间,可隔离开发环境生产环境,标准模式的详细介绍可参见 简单模式和标准模式的区别。可视化的开发界面 支持通过拖拉拽的方式构建任务流程,在统一的界面进行数据...

数据治理中心概述

待治理问题处理完成后,您可以进入治理评估页面,通过治理评估报告或治理排行榜,从不同视角查看已执行的治理操作所取得的治理成效。您可以通过分析治理结果,快速识别治理项问题较多的维度及问题类别,推动治理工作的解决落地,达成治理...

DataWorks准备工作流程

DataWorks是为您提供专业高效、安全可靠的一站大数据开发与治理平台,使用其进行数据开发前,您需做好相关准备工作,保障后续开发任务可顺利执行。本文为您介绍DataWorks的购买及环境准备流程,帮助您快速开通DataWorks并准备所需开发...

绑定交互分析实例

本文将为您介绍如何将交互分析(Hologres)实例绑定至DataWorks工作空间。前提条件 使用HoloStudio服务前,请确保已经成功开通交互分析实例,详情请参见 购买Hologres。实例创建成功后会默认生成一个名叫postgres的数据库,仅供管理...

操作权限控制

使用MaxCompute引擎时的权限问题逻辑说明:DataWorks预设角色MaxCompute引擎开发项目的Role存在权限映射关系(DataWorks预设角色默认拥有MaxCompute开发项目映射的role所有的引擎层面的权限)。DataWorks预设角色MaxCompute引擎生产...

入门概述

DataWorks V2.0常见问题与难点分析 DataWorks V2.0数据开发功能用法解析 DataWorks V2.0数据集成简介最佳实践 DataWorks V2.0智能监控简介最佳实践 DataWorks V2.0数据服务功能及用法解析 DataWorks V2.0数据质量简介及最佳实践 ...

处理治理项问题

登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击顶部菜单栏左侧的 图标,选择 全部产品>数据治理>数据治理中心。单击顶部菜单栏的 治理工作台,在 治理工作台 页面...

运维阶段

开发人员根据需求将代码发布上线后,还需要及时处理数据、程序、调度、监控告警等的异常事件,保障数据产出时效、程序高效运行和生产稳定性。背景信息 数据开发人员主要需要处理以下事项:程序异常处理、性能优化。调度异常处理。数据质量...

计算巢软件分销模式说明

软件 分销面临的问题和计算巢软件分销的解决方法 软件开发云分销商在合作过程中,存在需求和问题需要解决:云分销商需要触达更多的软件开发商来扩展业务,而软件开发商需要分销商的渠道来拓展用户。云分销商承接分销软件时,需要重复...

入门实践

而数据建模新增定义数据形态的流程,为您提供一站的模型管理解决方案和数据开发前的治理能力。在数据建模时,您可以根据对业务流程的理解和需求的调研,定义企业的业务标准和规范。同时,基于数据标准进行引用和实行,生成表结构,实现...

查看版本

进入节点编辑页面 登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。进入节点编辑页面。在 数据开发 页面的左侧目录树查找目标节点,双击节点名称即可进入节点编辑页面。...

工作空间概述

操作指南:引擎的基本操作 操作必读:简单模式和标准模式的区别 成员角色规划分配 工作空间创建完成后,您需要将RAM用户(子账号)添加至对应空间下,以便进行协同开发 在添加空间成员时,支持以工作空间为管控粒度,对用户授予不同的...

数据源开发和生产环境隔离

数据源隔离模式可以满足标准模式下,开发环境和生产环境的数据隔离需求。背景信息 同一个名称的数据源存在开发环境和生产环境两套配置,在配置数据源时,您可基于标准模式工作空间对应底层两个数据库或数据仓库的背景,针对不同环境设置...

流程管控

背景信息 DataWorks的工作空间分为 标准模式和简单模式,不同模式工作空间下任务的开发流程存在一定差异,两种模式的数据开发流程示意如下。标准模式工作空间开发流程 简单模式工作空间开发流程 如上图所示,在通用流程的关键节点,例如,...

数据开发:开发者

本文以使用MaxCompute数据源,在DataWorks上运行MaxCompute作业任务为例,为您介绍开发人员如何使用数据开发(DataStudio)创建一个周期调度任务,帮助您快速了解数据开发(DataStudio)模块的基本使用。前提条件 已完成开发前的环境准备,...

创建ClickHouse数据源

后续操作 数据源创建完成后,您可根据需要执行如下操作:计算任务开发与调度:DataWorks的数据开发与运维中心模块,为您提供ClickHouse任务的开发与调度能力,若您需要基于该ClickHouse数据源进行ClickHouse任务开发,或周期性调度...

数据服务概述

烟囱式开发:开发成本高,复用性低,为每个需求提供对应的数据接口。数据安全和查询性能无法保障:在数据接口开发时往往只考虑数据的获取性,数据资源访问安全性和数据访问的稳定性考虑少。维护成本高:缺乏线上平台化管理,异常情况无法...

数据服务概述

烟囱式开发:开发成本高,复用性低,为每个需求提供对应的数据接口。数据安全和查询性能无法保障:在数据接口开发时往往只考虑数据的获取性,数据资源访问安全性和数据访问的稳定性考虑少。维护成本高:缺乏线上平台化管理,异常情况无法...

创建Hologres外部表

简单模式与标准模式工作空间介绍,详情请参见 必读:简单模式和标准模式的区别。操作 描述 从开发环境加载 用于从开发环境加载开发表的相关信息,并显示至当前页面。说明 仅当表已被提交至开发环境后,才可执行该操作。执行该操作后,开发...

创建Hologres内部表

简单模式与标准模式工作空间介绍,详情请参见 必读:简单模式和标准模式的区别。操作 描述 从开发环境加载 用于从开发环境加载开发表的相关信息,并显示至当前页面。说明 仅当表已被提交至开发环境后,才可执行该操作。执行该操作后,开发...

创建MaxCompute数据源

数据源创建完成后,您可根据需要执行如下操作:计算任务开发与调度:DataWorks的数据开发与运维中心模块,为您提供MaxCompute任务的开发与调度能力,若您需要基于该MaxCompute数据源进行MaxCompute任务开发,或周期性调度MaxCompute相关...

创建并使用MaxCompute表

您可通过MaxCompute的SQL语句及DataWorks提供的可视化方式,创建管理MaxCompute表。相比SQL方式,可视化方式操作更加便捷。本文为您介绍如何使用可视化方式创建及管理MaxCompute表。前提条件 在 工作空间配置 页面绑定MaxCompute引擎后,...

创建AnalyticDB for MySQL3.0数据源

后续操作 数据源创建完成后,您可根据需要执行如下操作:计算任务开发与调度:DataWorks的数据开发与运维中心模块,为您提供AnalyticDB for MySQL3.0任务的开发与调度能力,若您需要基于该AnalyticDB for MySQL3.0数据源进行AnalyticDB for...

创建AnalyticDB for PostgreSQL数据源

后续操作 数据源创建完成后,您可根据需要执行如下操作:计算任务开发与调度:DataWorks的数据开发与运维中心模块,为您提供AnalyticDB for PostgreSQL任务的开发与调度能力,若您需要基于该AnalyticDB for PostgreSQL数据源进行AnalyticDB...

个人设置

进入个人设置 登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在DataStudio界面左侧导航栏底部单击 图标,进入 设置>个人设置 页面。在该页面,您可进行如下操作:设置...

创建Hologres数据源

数据源创建完成后,您可根据需要执行如下操作:计算任务开发与调度:DataWorks的数据开发与运维中心模块,为您提供Hologres任务的开发与调度能力,若您需要基于该Hologres数据源进行Hologres任务开发,或周期性调度Hologres相关任务,需先...

查看监控任务

进入任务查询 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据质量,在下拉框中选择对应工作空间后单击 进入数据质量。在左侧导航栏,单击 任务查询。您可以在 任务查询 页面,根据 引擎/数据源、状态 和 ...

如何判断页面问题是否 H5 容器相关

背景 在 H5 App 的开发过程中,开发者可能会遇到各种前端问题,如渲染问题、卡顿或其他前端异常情况。因为 H5 App 是在 mPaaS 容器中加载的,所以需要界定这类问题是否容器相关。处理方法 iOS 平台 当前mPaaS iOS平台上的容器是基于...

AnalyticDB for MySQL

DataWorks的AnalyticDB for MySQL节点可进行AnalyticDB for MySQL任务的开发和周期性调度,以及其他作业的集成操作。本文为您介绍使用AnalyticDB for MySQL节点进行任务开发的主要流程。前提条件 已购买相应版本服务。购买DataWorks标准...

必读:简单模式和标准模式的区别

简单模式如何实现开发生产隔离 若您已经在使用简单模式工作空间,并希望实现简单模式开发与生产隔离,您可参考该部分内容。注意事项 不同工作空间模式对于创建数据源存在一定的要求,标准模式工作空间需要分别为开发环境和生产环境创建...

创建CDH Impala节点

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。右键单击某个业务流程,选择 新建节点>CDH>CDH Impala。说明 鼠标悬停至顶部 新增 按钮,根据界面...

医疗

本文介绍了在医疗行业中使用了移动开发平台服务的客户案例。南京儿医在线 mPaaS x 南京儿医在线:媲美原生,小程序容器提升医疗应用研发效能。项目背景「南京儿医在线」是南京儿童医院开发的官方就医 App。在 App 发展初期,采用了「原生 ...

StarRocks

DataWorks的StarRocks节点可进行StarRocks任务的开发和周期性调度,以及其他作业的集成操作。本文为您介绍使用StarRocks节点进行任务开发的主要流程。背景信息 StarRocks是新一代极速全场景MPP(Massively Parallel Processing)数据库,...

创建并使用AnalyticDB for PostgreSQL节点

DataWorks的AnalyticDB for PostgreSQL节点可进行AnalyticDB for PostgreSQL任务的开发和周期性调度,以及其他作业的集成操作。本文为您介绍使用AnalyticDB for PostgreSQL节点进行任务开发的主要流程。前提条件 已购买DataWorks标准版及...

表管理

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在左侧导航栏单击 表管理。新建、查找及编辑目标表 新建表及导入表数据 在表管理页面,您可单击 及 ...

创建并使用PAI Designer

人工智能平台PAI的 可视化建模Designer,用于实现端到端的机器学习开发流程的可视化建模工具。DataWorks为您提供PAI Designer节点,方便您通过该算法节点载入Designer工作流,通过调度配置实现Designer工作流的周期性任务调度。前提条件 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
媒体处理 移动开发平台 mPaaS 对象存储 视频点播 轻量应用服务器 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用