数据仓库应用开发-数据仓库应用开发文档介绍内容-阿里云

应用开发向导

testWhileIdle:true-testOnBorrow:false-testOnReturn:false-removeAbandoned:true-removeAbandonedTimeout:180 使用SQL开发工具访问云原生数据仓库MySQL版，推荐使用哪种连接方式？云原生数据仓库MySQL版完全兼容MySQL协议，基本上能访问...

表存储格式定义

您可以根据使用场景，在建表时选行存表（适合数据更新较频繁或采用INSERT方式的实时写入的场景）或列存表（适合少量列的数据查询、聚集等数据仓库应用场景）。行存表默认情况下，AnalyticDB PostgreSQL版创建的是行存表（Heap Table），...

通过PySpark开发Spark应用

登录云原生数据仓库AnalyticDB MySQL控制台，在左上角选择集群所在地域。在左侧导航栏，单击集群列表，在湖仓版（3.0）页签，单击目标集群ID。在左侧导航栏，单击作业开发>Spark Jar 开发。在编辑器窗口上方，选择Job型资源组和Spark...

受众与核心能力

产品受众从事数据开发、算法开发等岗位的技术人员从事销售运营、商业智能分析等岗位的业务人员从事数据安全与合规工作的管理人员从事数据应用开发的开发人员把控公司核心数据资产的管理人员核心能力基于DataWorks，您可以获得如下...

存储格式

列存表列存表（Column-Oriented Table）的按列存储格式，数据访问只会读取涉及的列，适合少量列的数据查询、聚集等数据仓库应用场景，在此类场景中，列存表能够提供更高效的 I/O。但列存表不适合频繁的更新操作或者大批量的INSERT写入场景...

索引优化

避免在频繁更新的表上建Bitmap索引：Bitmap索引最适合用户只查询数据而不更新数据的数据仓库应用，不适合有大量并发事务修改数据的OLTP应用。合理使用表达式索引：索引列不必只是表的一列，而是可以是从表的一列或多列计算的函数或标量表达...

必读：简单模式和标准模式的区别

附录：不同工作空间模式下，DataWorks模块对应操作的数据源您可以在数据开发>数据源界面下查看数据开发中已绑定的数据源信息。绑定后不同工作空间模式下，DataWorks模块对应操作的数据源如下表所示：DataWorks模块标准模式简单模式 ...

权限管理与规范化数据开发

仅需要授权数据开发人员“DataWorks开发角色”即可完成所有数据仓库开发工作。安全、规范。具备安全、规范的代码发布管控流程（包含代码评审、代码DIFF查看等功能），保障生产环境稳定性，避免不必要的因代码逻辑引起的脏数据蔓延或任务报...

连接2.0集群

在应用开发中，您可以通过以下方式连接云原生数据仓库AnalyticDB MySQL版 2.0集群。通过代码连接云原生数据仓库AnalyticDB MySQL版 2.0集群。通过客户端连接云原生数据仓库AnalyticDB MySQL版 2.0集群。应用开发中通过代码连接2.0集群 ...

连接集群

应用开发中通过代码连接到云原生数据仓库AnalyticDB MySQL版 Java Druid连接池配置 Python PHP C#（Mac）Golang 通过MySQL命令行工具连接到云原生数据仓库AnalyticDB MySQL版 MySQL命令行连接AnalyticDB MySQL 通过客户端连接到云原生数据...

用户价值

业务应用方 应用开发 业务分析使用数据资产获得业务价值更便捷的使用数据和算法资源：通过统一服务，应用开发人员可以快速开发数据智能应用，提高智能应用开发效率，发挥数据价值。自主挖掘数据的业务价值：通过画像分析、业务模型编辑器...

划分数据域

数据仓库是面向主题（数据综合、归类并进行分析利用的抽象）的应用。数据仓库模型设计除横向的分层外，通常也需要根据业务情况进行纵向划分数据域。数据域是联系较为紧密的数据主题的集合，是业务对象高度概括的概念层次归类，目的是便于...

用户授权与管理

角色规划使用数据建模并应用至数据开发的过程中，通常需要进行定义标准、数据建模、数据开发、部署运维等任务，下图为您示例不同流程中操作人员的角色以及所需的角色权限。建议您参考下图进行用户角色及权限规划。开通权限建议您参考 ...

阶段一：基础防护建设

场景二：规范数据开发流程 数据仓库不仅是企业的核心数据资产，也是业务决策神经中枢。因此，对于生产环境的机密性、稳定性需通过DevOps的方式来保障。DataWorks提供了多个预设角色，并配合标准模式工作空间，支持团队内分权管理、各司其职...

指定执行查询的资源组

通过作业开发页面提交Spark SQL或Spark应用通过云原生数据仓库AnalyticDB MySQL版控制台作业开发页面手动选择资源组。此时无法通过Hint、绑定资源组的方式指定资源组。通过OpenAPI提交Spark应用通过SumbitSparkApp接口的...

DMS

使用DMS连接云原生数据仓库AnalyticDB PostgreSQL版数据库可以使得开发人员更专注于应用程序开发和业务需求，而无需过多关注底层数据库的管理和维护。功能简介数据管理（Data Management Service，简称DMS）支持MySQL、SQL Server、...

如何分配开发任务

在团队协同开发任务中，管理员创建好应用之后，可以将应用的开发任务分配给不同的团队成员。...进行「在线开发部署」，打开 CloudIDE 开始应用开发，也可以在「基本信息」中找到代码仓库地址，将代码克隆到本地进行开发。

ETL工作流快速体验

案例提供的数据仅用于阿里云大数据开发治理平台DataWorks数据应用体验。仅空间管理员角色可导入ETL模板至目标工作空间。如需给账号授予空间管理员角色，请参见空间级模块权限管控。导入ETL工作流模板您可以将DataWorks ETL工作流模板...

如何获取更多技术信息？

开发者社区-云原生数据仓库AnalyticDB PostgreSQL版开发者社区，请参见云原生数据仓库 AnalyticDB PostgreSQL版开发者社区。Greenplum Database开源社区官方资料，请参见 Greenplum Database官网。推荐加入产品技术支持钉钉群（群号：...

无感集成（Zero-ETL）

云原生数据仓库 AnalyticDB PostgreSQL 版提供无感集成（Zero-ETL）功能，可以帮助您一站式完成数据同步和管理，实现事务处理和数据分析一体化，专注于数据分析业务。公测时间 2024年4月1日至6月30日。公测地域华东2（上海）。方案概述 ...

【停售公告】停止售卖云原生数据仓库AnalyticDB ...

阿里云停止售卖云原生数据仓库AnalyticDB MySQL版 2.0 集群。...建议建议您将云原生数据仓库AnalyticDB MySQL版 2.0 的数据和应用迁移至云原生数据仓库AnalyticDB MySQL版 3.0。详情请参见 AnalyticDB MySQL 2.0数据导入。

Spark开发编辑器

本文介绍如何在云原生数据仓库AnalyticDB MySQL版控制台创建和执行Spark应用。功能说明通过Spark开发编辑器创建和执行Spark离线应用或流应用。查看当前Spark应用Driver的日志和应用提交时的相关信息。查看SQL语句的执行日志。前提条件 ...

新用户必读

完成入门操作后，您可以通过下列资源快速使用其他各项功能：连接数据库：介绍在应用开发中连接 AnalyticDB MySQL 的方法。数据导入：如果您需要将已有数据源中的数据迁移到 AnalyticDB MySQL，阿里云为此提供了完善的数据同步解决方案。...

功能简介

数据预览支持不同云计算资源数据的快速预览，可为开发人员和数据应用人员提供全面直观的数据呈现。支持MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL多种云计算资源进行物理表数据预览，可快速对各类数据资源下的物理表的...

查询物理表数据

数据查询提供通过SQL查询预览数据资源，为开发人员和数据应用人员提供全面直观的数据呈现。本文介绍如何查询物理表数据。前提条件已新建云计算资源，具体操作，请参见新建云计算资源。操作步骤登录企业数据智能平台。在页面左上角，单击...

典型场景

本文将介绍云原生数据仓库AnalyticDB PostgreSQL版的典型场景及产品功能优势。典型场景 数据仓库服务您可以通过数据传输服务（DTS）或数据集成服务（DataX），将云数据库（例如RDS、PolarDB）或自建数据库批量同步到云原生数据仓库...

产品概述

云原生数据仓库 AnalyticDB PostgreSQL 版是一种大规模并行处理（MPP）数据仓库服务，可提供海量数据在线分析服务。云原生数据仓库 AnalyticDB PostgreSQL 版基于开源项目Greenplum构建，由阿里云深度扩展，兼容ANSI SQL 2003，兼容...

账号类型

用户名和密码访问云原生数据仓库MySQL版方式有很多种：通过阿里云控制台、客户端或者JDBC。通过客户端或者JDBC访问时，需要数据库的用户名和密码，前面提到云原生数据仓库MySQL版账号是基于阿里云账号体系，所以数据库账号和密码为阿里云...

预览物理表数据

数据查询提供不同数据资源的预览，可为开发人员、数据应用人员和数据分析人员提供全面直观的数据呈现。本文介绍如何预览物理表数据。前提条件已新建云计算资源，具体操作，请参见新建云计算资源。操作步骤登录企业数据智能平台。在页面...

使用kettle将本地数据导入AnalyticDB MySQL 2.0

本文以Excel为例，介绍如何通过kettle将本地Excel数据迁移到云原生数据仓库AnalyticDB MySQL版 2.0集群。背景信息 Kettle是一款非常受欢迎的开源ETL工具软件，主要用于数据整合、转换和迁移。Kettle除了支持各种关系型数据库，HBase ...

通过实时计算Flink读写云原生数据仓库AnalyticDB ...

云原生数据仓库AnalyticDB PostgreSQL版支持通过实时计算Flink读写数据。本文介绍如何通过Flink写入数据到 AnalyticDB PostgreSQL版及读取 AnalyticDB PostgreSQL版数据。通过实时计算Flink版写入数据到AnalyticDB PostgreSQL版具体...

使用OpenAPI

本文为您介绍使用云原生数据仓库AnalyticDB PostgreSQL版 OpenAPI的基本信息及注意事项。关于使用阿里云OpenAPI的详细介绍，请参见使用OpenAPI。基本信息版本说明版本号说明 2016-05-03 AnalyticDB PostgreSQL版实例使用该版本号调用...

使用OpenAPI

本文为您介绍使用云原生数据仓库AnalyticDB MySQL版 OpenAPI的基本信息及注意事项。关于使用阿里云OpenAPI的详细介绍，请参见使用OpenAPI。基本信息版本说明版本号说明 2019-03-15 数仓版（3.0）集群使用该版本号调用API。2021-12-01 ...

层次调用规范

层次调用规范 ADS应用层优先调用数据仓库公共层数据。如果已经存在CDM层数据，不允许ADS应用层跨过CDM中间层从ODS层重复加工数据。CDM中间层应该积极了解应用层数据的建设需求，将公用的数据沉淀到公共层，为其他数据层次提供数据服务。...

转换计费方式

按量付费的云原生数据仓库AnalyticDB MySQL版 3.0 集群可以转为包年包月集群。本文介绍按量付费转包年包月的操作说明。背景信息按量付费变更为包年包月，需要支付包年包月费用，请确保余额充足。操作步骤登录云原生数据仓库AnalyticDB ...

构建数据仓库

实时数据：按实际业务需求使用Flink进行实时ETL（可选）、结果入库，使用交互式分析产品构建实时数据仓库、应用集市，并提供海量数据的实时交互查询和分析。交互式分析：提供实时离线联邦查询。历史离线数据存放于MaxCompute，实时分析数据...

扩展程序概述

应用范围系统模块扩展点事件回调校验结果的OpenAPI 空间级 数据开发 文件提交前置事件文件删除前置事件文件发布前置事件代码运行前置事件表提交到开发前置事件表提交到生产前置事件说明仅标准模式工作空间支持发布相关扩展点。...

PHP访问（2.0版）

user_id为列名 } 使用mysqli连接云原生数据仓库AnalyticDB MySQL版 2.0集群/连接云原生数据仓库AnalyticDB MySQL版2.0集群的url，可从云原生数据仓库AnalyticDB MySQL版控制台获取url连接信息$ads_server_name="mydbname-xxxx.ads-...

数据服务

面向数据资产管理者提供服务的统计分析、服务用量统计分析，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。前提条件已根据快速入门教程完成加载样例数据操作，具体信息请参见样例数据。已根据快速入门教程...

根据标签筛选集群

云原生数据仓库AnalyticDB MySQL版集群绑定标签后，您可以根据标签筛选集群。操作步骤登录云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击集群列表。单击标签，选择标签的标签键和标签...

数据仓库应用开发

新品推荐