概述
系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，同时在数据仓库和DLA中创建与数据源表相同的表结构，基于目标数据仓库进行数据分析，不影响数据源端的线上业务运行。方案优势 T+1全量同步一键建仓...
无感集成（Zero-ETL）
为了解决这些问题，阿里云瑶池数据库提供了无感集成（Zero-ETL）功能，可以快速构建业务系统（OLTP）和数据仓库（OLAP）之间的数据同步链路，将业务系统（OLTP）的数据自动进行提取、转换清洗和加载到数据仓库（OLAP），从而一站式完成数据...
功能特性
OSS数据源 一键入湖 通过DLA控制台配置数据源（RDS数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，同时在数据仓库和DLA中创建与数据源表相同的表...
什么是数据管理DMS
AnalyticDB MySQL版支持高吞吐的数据实时增删改、低延时地实时分析复杂ETL（Extract Transform Load），兼容上下游生态工具，可用于构建企业级报表系统、数据仓库和数据服务引擎。AnalyticDB PostgreSQL版：云原生数据仓库AnalyticDB ...
一键建仓
说明 普通用户需要有源数据库RDS MySQL的导出权限和数据仓库AnalyticDB MySQL 3.0的变更权限（新购实例不涉及）。关于权限的更多信息，请参见 权限管理。操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 解决方案>一键建仓。单击页面...
什么是MaxCompute
MaxCompute适用于大型互联网企业的数据仓库和BI分析、网站的日志分析、电子商务网站的交易分析、用户特征和兴趣挖掘等。详细发展历程、产品荣誉及客户案例请参见 发展历程 和 客户案例。MaxCompute还深度融合了阿里云如下产品：DataWorks ...
支持的云服务
MaxCompute和DataWorks提供完善的ETL、数据分析、数据地图、数据治理和数据仓库管理能力，并支持SQL、MapReduce、Graph等多种经典的分布式计算模型，能够更快速地解决用户海量数据计算问题，有效降低企业成本，保障数据安全。更多DataWorks...
无感数据集成（Zero-ETL）
为了解决这些问题，阿里云瑶池数据库提供了无感集成（Zero-ETL）功能，可以快速构建业务系统（OLTP）和数据仓库（OLAP）之间的数据同步链路，将业务系统（OLTP）的数据自动进行提取、转换清洗和加载到数据仓库（OLAP），从而一站式完成数据...
数据加工过程卡点校验
整个流程中，先有数据加工，才有数据仓库模型和数据仓库代码的建设。因此，保障数据加工过程中的质量是保障离线数据仓库整体数据质量的重要环节。您可以通过DataWorks、MaxCompute Studio、MaxCompute SDK提交各种任务加工MaxCompute中的...
Teradata应用迁移至AnalyticDB PostgreSQL
本文介绍如何将Teradata数据和应用迁移到 云原生数据仓库AnalyticDB PostgreSQL版。迁移原则 云原生数据仓库AnalyticDB PostgreSQL版 对Teradata语法有着很好的兼容。本指南在将TD数仓应用迁移至 AnalyticDB PostgreSQL 云化数仓过程中，...
从RDS同步到云原生数据仓库 AnalyticDB MySQL 版
术语/概念对应关系 MySQL 云原生数据仓库AnalyticDB MySQL 数据库 云原生数据仓库AnalyticDB MySQL（2.0）：表组 云原生数据仓库AnalyticDB MySQL（3.0）：数据库 表 云原生数据仓库AnalyticDB MySQL（2.0）：表 云原生数据仓库AnalyticDB ...
从RDS同步到云原生数据仓库AnalyticDB MySQL
术语/概念对应关系 MySQL 云原生数据仓库AnalyticDB MySQL 数据库 云原生数据仓库AnalyticDB MySQL（2.0）：表组 云原生数据仓库AnalyticDB MySQL（3.0）：数据库 表 云原生数据仓库AnalyticDB MySQL（2.0）：表 云原生数据仓库AnalyticDB ...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
通过实时计算Flink版读取云原生数据仓库AnalyticDB ...
本文介绍如何通过阿里云实时计算Flink版实时读取 云原生数据仓库AnalyticDB PostgreSQL版（原分析型数据库PostgreSQL版）数据，包括版本限制、语法示例、创建和运行Flink作业、WITH参数、CACHE参数、类型映射和参数支持等。版本限制 创建3....
数据集市
数据集市是基于业务分类，面向特定应用场景或者产品的数据组织。通常位于数据应用层，依赖于公共层的整合数据。本文为您介绍如何创建数据集市并管理主题域。前提条件 已创建业务分类，用于对指定业务进行特定场景化的细分。详情请参见 业务...
自建HBase迁移至云原生数据仓库 AnalyticDB MySQL 版 ...
前提条件 自建HBase和 云原生数据仓库AnalyticDB MySQL版 3.0支持的版本，请参见 迁移方案概览。已创建目标 云原生数据仓库AnalyticDB MySQL版 3.0，详情请参见 创建集群。目标 云原生数据仓库AnalyticDB MySQL版 3.0实例的存储空间须大于...
配置跨库Spark SQL节点
任务编排中的跨库Spark SQL节点，主要针对各类跨库数据同步和数据加工场景，您可以通过编写Spark SQL，完成各种复杂的数据同步或数据加工的任务开发。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、...
同步任务的注意事项及限制
源库为MySQL的注意事项及限制 MySQL间的同步 MySQL同步至PolarDB MySQL版 MySQL同步至 云原生数据仓库 AnalyticDB MySQL 版 2.0 MySQL同步至 云原生数据仓库 AnalyticDB MySQL 版 3.0 MySQL同步至云原生数据仓库AnalyticDB PostgreSQL ...
文档检索和LLM集成
AnalyticDB PostgreSQL特别适合处理大规模数据集，支持实时分析和决策支持，是企业进行数据挖掘、商业智能（BI）、报告和数据可视化的有力工具。作为一种托管服务，它简化了数据仓库的管理和运维，让用户能够专注于数据分析而不是底层基础...
我是安全管理员
一键建仓 一键创建实时同步的数据仓库，数据在秒级的延迟下，同步至AnalyticDB MySQL版数据库中。数据库迁移 通过创建工单实现数据库迁移、校验和清理的闭环操作。运维管理 数据库分组 在SQL变更或结构设计中快速载入创建的数据库分组中的...
通过实时计算Flink读写云原生数据仓库AnalyticDB ...
云原生数据仓库AnalyticDB PostgreSQL版 支持通过实时计算Flink读写数据。本文介绍如何通过Flink写入数据到 AnalyticDB PostgreSQL版 及读取 AnalyticDB PostgreSQL版 数据。通过实时计算Flink版写入数据到AnalyticDB PostgreSQL版 具体...
使用OpenAPI
本文为您介绍使用 云原生数据仓库AnalyticDB PostgreSQL版 OpenAPI的基本信息及注意事项。关于使用阿里云OpenAPI的详细介绍，请参见 使用OpenAPI。基本信息 版本说明 版本号 说明 2016-05-03 AnalyticDB PostgreSQL版 实例使用该版本号调用...
确定需求
您在构建数据仓库之前，首先需要确定构建数据仓库的目标与需求，并进行全面的业务调研。您需要了解真实的业务需求，以及确定数据仓库要解决的问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功...
使用OpenAPI
本文为您介绍使用 云原生数据仓库AnalyticDB MySQL版 OpenAPI的基本信息及注意事项。关于使用阿里云OpenAPI的详细介绍，请参见 使用OpenAPI。基本信息 版本说明 版本号 说明 2019-03-15 数仓版（3.0）集群使用该版本号调用API。2021-12-01 ...
确定需求
您在构建数据仓库之前，首先需要确定构建数据仓库的目标与需求，并进行全面的业务调研。您需要了解真实的业务需求，以及确定数据仓库要解决的问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功...
转换计费方式
按量付费的 云原生数据仓库AnalyticDB MySQL版 3.0 集群可以转为包年包月集群。本文介绍按量付费转包年包月的操作说明。背景信息 按量付费变更为包年包月，需要支付包年包月费用，请确保余额充足。操作步骤 登录 云原生数据仓库AnalyticDB ...
PHP访问（2.0版）
user_id为列名 } 使用mysqli连接 云原生数据仓库AnalyticDB MySQL版 2.0集群/连接云原生数据仓库AnalyticDB MySQL版2.0集群的url，可从云原生数据仓库AnalyticDB MySQL版控制台获取url连接信息$ads_server_name="mydbname-xxxx.ads-...
AnalyticDB MySQL湖仓版（3.0）使用流程
云原生数据仓库AnalyticDB MySQL版（简称ADB，原分析型数据库MySQL版）是云端托管的PB级高并发实时数据仓库，是专注于服务OLAP领域的数据仓库。本指南将指引您完成一次 AnalyticDB MySQL版 集群创建及使用。湖仓版（3.0）快速入门视频指导 ...
AnalyticDB MySQL数仓版（3.0）使用流程
云原生数据仓库AnalyticDB MySQL版（简称ADB，原分析型数据库MySQL版）是云端托管的PB级高并发实时数据仓库，是专注于服务OLAP领域的数据仓库。本指南将指引您完成一次 AnalyticDB MySQL版 集群创建及使用。数仓版（3.0）快速入门视频指导 ...
DataWorks作业调度
使用DataWorks可以使云原生数据仓库PostgreSQL版获得任务开发、任务依赖关系管理、任务调度、任务运维等全方位强大的能力，进一步增强分析型数据库PostgreSQL版的ETL能力。本文将介绍如何使用DataWorks来调度云原生数据仓库PostgreSQL版的...
免费试用
阿里云提供免费试用 云原生数据仓库AnalyticDB PostgreSQL版 的活动。您可以访问 免费试用 申请试用资格。试用教程请参见 快速使用AnalyticDB PostgreSQL版。
数据质量教程概述
准确性 准确性是指数据记录中信息和数据是否准确、不存在错误或异常。例如，在本教程中，如果UV、PV数值小于0，则明显是错误数据。一致性 对于不同的业务流程和节点，同一份数据必须保持一致性。例如表 province 字段中如果有 浙江、ZJ 两...
数据质量教程概述
准确性 准确性是指数据记录中信息和数据是否准确、不存在错误或异常。例如，在本教程中，如果UV、PV数值小于0，则明显是错误数据。一致性 对于不同的业务流程和节点，同一份数据必须保持一致性。例如表 province 字段中如果有 浙江、ZJ 两...
如何使用T+1全量同步一键建仓
操作步骤 一键创建OSS数据仓库 创建一键建仓任务后，根据业务需要，您也可以在 数据入湖 页面的 任务列表 页签中，在 操作 列单击 执行 随时手动发起数据同步操作，在目标数据仓库OSS中创建与数据源（RDS数据源、ECS自建数据库数据）相同的...
实例标签筛选
实例绑定标签后，您可以根据标签筛选实例。操作步骤 登录 云原生数据仓库PostgreSQL版控制台 在 实例列表 页面左上角，单击 标签筛选，选择标签键与值筛选实例。
重启实例
本文您介绍如何重启 云原生数据仓库AnalyticDB PostgreSQL版 实例。注意事项 重启过程一般耗时3到30分钟，在此过程中该实例不能对外提供服务。操作步骤 登录 云原生数据仓库AnalyticDB PostgreSQL版控制台。在控制台左上角，选择实例所在...
账号类型
用户名和密码 访问云原生数据仓库MySQL版方式有很多种：通过阿里云控制台、客户端或者JDBC。通过客户端或者JDBC访问时，需要数据库的用户名和密码，前面提到云原生数据仓库MySQL版账号是基于阿里云账号体系，所以数据库账号和密码为阿里云...
创建数据库
您可以使用DMS（Data Management Service）、客户端（Navicat for MySQL、DBeaver、DBVisualizer、SQL WorkBench/J）、业务系统中的程序代码或者MySQL命令行工具连接 云原生数据仓库AnalyticDB MySQL版 集群，然后通过CREATE DATABASE语句...
- 产品推荐
- 这些文档可能帮助您