数据开发与运维中心:数据加工

DataWorks的数据开发(DataStudio)是数据加工的开发平台,运维中心是智能运维平台,基于这两个功能模块,您可以在DataWorks上规范、高效地构建和运维数据开发工作流。

功能概述

DataWorks的数据开发的亮点功能如下。

  • DataStudio支持MaxCompute、EMR、CDH、Hologres、AnalyticDB、Clickhouse等多种计算引擎,支持在统一的平台上进行各类引擎任务的开发、测试、发布和运维等操作。

  • DataStudio支持智能编辑器、可视化依赖编排,调度能力经过阿里集团内调度任务、复杂业务依赖的反复验证。

  • DataStudio提供隔离的开发和生产环境,结合版本管理、代码评审、冒烟测试、发布管控、操作审计等配套功能,帮助企业规范地完成数据开发。

  • 运维中心支持数据时效性保障、任务诊断、影响分析、自动运维、移动运维等功能。

核心技术与架构

  • 高效、规范的开发流程

    image
    说明

    DataWorks提供标准模式的工作空间,可隔离开发环境与生产环境,标准模式的详细介绍可参见必读:简单模式和标准模式的区别

  • 可视化的开发界面开发组织结构支持通过拖拉拽的方式构建任务流程,在统一的界面进行数据开发和调度配置。

  • 任务监控与定位处理

    image

计费

进行数据开发与运维可能产生的费用包括:

  • 调度费用:若任务发布至生产环境调度运行,会产生调度费用,详情请参见任务调度计费说明

  • 运维监控费用:若任务配置并触发监控规则,会产生监控费用,详情请参见智能监控计费说明

说明

进行数据开发时,可能会产生引擎的计算和存储费用,此类费用不在DataWorks收取,账单也不会体现在DataWorks产品下。

开通使用

开通DataWorks版本后,您可按需购买资源组,添加数据源,在数据开发中绑定数据源,开始数据开发。开通使用的操作详情请参见数据开发章节和运维中心章节。