构建数据仓库

DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力,本文将为您介绍DataWorks在构建云上大数据仓库构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业:全行业...

确定需求

您在构建数据仓库之前,首先需要确定构建数据仓库的目标与需求,并进行全面的业务调研。您需要了解真实的业务需求,以及确定数据仓库要解决的问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石,直接决定数据仓库能否建设成功...

数仓构建流程

下图为MaxCompute数据仓库构建的整体流程。基本概念 在正式学习本教程之前,您需要首先理解以下基本概念:业务板块:比数据域更高维度的业务划分方法,适用于庞大的业务系统。维度:维度建模由Ralph Kimball提出。维度模型主张从分析决策的...

数仓构建流程

本文为您介绍构建MaxCompute数据仓库的流程。构建MaxCompute数据仓库的整体流程如下。基本概念 在正式学习本教程之前,您需要首先理解以下基本概念:业务板块:比数据域更高维度的业务划分方法,适用于庞大的业务系统。维度:维度建模由...

确定需求

您在构建数据仓库之前,首先需要确定构建数据仓库的目标与需求,并进行全面的业务调研。您需要了解真实的业务需求,以及确定数据仓库要解决的问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石,直接决定数据仓库能否建设成功...

通过一键建仓同步至数仓版

应用场景 一键建仓主要解决云上企业构建数据仓库时配置数据同步链路繁杂的问题,同时提供了高性价比的 AnalyticDB MySQL版 存储计算资源方案。一键建仓适用于以下场景:全库同步。通过一键建仓一键生成同步链路,将一个或多个PolarDB MySQL...

通过一键建仓同步至数仓版

应用场景 一键建仓主要解决云上企业构建数据仓库时配置数据同步链路繁杂的问题,同时提供了高性价比的 AnalyticDB MySQL版 存储计算资源方案。一键建仓适用于以下场景:全库同步。通过一键建仓一键生成同步链路,将一个或多个RDS实例中的...

通过一键建仓同步至数仓版

应用场景 一键建仓主要解决云上企业构建数据仓库时配置数据同步链路繁杂的问题,同时提供了高性价比的 AnalyticDB MySQL版 存储计算资源方案。一键建仓适用于以下场景:全库同步。通过一键建仓一键生成同步链路,将一个或多个日志库中的...

应用场景

多源联合分析 该场景需要解决云上企业构建数据仓库时配置数据同步链路繁杂的问题,以及分库分表所带来的数据分析复杂性问题,让用户可以更专注于业务逻辑。该场景可实现:支持多数据源接入 支持数据库(RDS、PolarDB-X(原DRDS)、PolarDB...

关系图

DataWorks智能数据建模的关系图,帮助您快速构建数据仓库模型架构图,直观展示数据仓库中维度、维度表、明细表、汇总表、应用表等各模型之间的关系。一个关系图承载一个数据仓库模型,一个账号支持创建多个关系图。本文为您介绍关系图的...

数仓构建流程

数仓构建流程 下图为使用Dataphin构建数据仓库的基本流程。基本概念 在正式学习本教程之前,您需要了解以下基本概念:数据板块:数据板块定义了数据仓库的多种命名空间,是一种系统级的概念对象,是比主题域更高维度的业务划分方法,适用于...

客户案例

解决方案 基于阿里云MaxCompute构建数据仓库,在开发人员成本、软硬件成本上具有明显优势。从初期至今,基于MaxCompute构建的数据仓库有极高的消费比。初期只有一个开发人员的情况下,可以快速地搭建数据仓库,且费用成本极低。解决方案...

划分数据

数据仓库是面向主题(数据综合、归类并进行分析利用的抽象)的应用。数据仓库模型设计除横向的分层外,通常也需要根据业务情况进行纵向划分数据域。数据域是联系较为紧密的数据主题的集合,是业务对象高度概括的概念层次归类,目的是便于...

ETL工具支持概览

可以同时参见更详细的同步方案列表 数据迁移及同步方案综述:数据传输服务(DTS):阿里云提供的实时数据同步服务,可以将其他数据源(RDS MySQL,ECS自建MySQL,PolarDB等)实时同步数据到 AnalyticDB PostgreSQL版,构建实时数据仓库解决...

QlikView(2.0版)

本章节介绍如何通过QlikView连接 云原生数据仓库AnalyticDB MySQL版 2.0集群,并通过QlikView构建BI系统。前提条件 安装ODBC MySQL Driver,推荐使用MySQL Connector/ODBC 3.5.1或5.3 版本。安装QlikView 11.20.x版本。通过QlikView连接...

构建测试数据

性能测试以TPC-DS 1TB数据为测试数据,使用标准的DSDGEN工具构造样本数据。说明 本文的TPC-DS的实现基于TPC-DS的基准测试,并不能与已发布的TPC-DS基准测试结果相比较,本文中的测试并不符合TPC-DS基准测试的所有要求。从 TPC官网 下载TPC-...

案例:构建文本语义检索系统

本文介绍如何使用AnalyticDB PostgreSQL向量数据构建文本语义检索系统。背景信息 文本语义检索旨在通过理解查询文本的意图以及文本含义来得到更好的搜索结果。和传统的词法搜索不同,词法搜索通常只关注查询的关键词,而不理解查询的整体...

2020年

通过云监控平台为DTS任务设置报警规则 周期性全量数据迁移升级为数据集成功能,通过该功能可以帮助您构建更加灵活的数据仓库(例如构建T+1的周期性数仓)。数据集成调度策略说明 配置RDS MySQL间的数据集成任务 发布全链路诊断功能,可展示...

数据构建之MaxCompute湖仓一体最佳实践

MaxCompute+DLF湖仓一体方案打破数据湖与数据仓库割裂的体系,架构上将数据湖的灵活性、生态丰富与数据仓库的企业级能力进行融合,构建数据湖和数据仓库融合的数据管理平台。本文介绍湖仓一体的具体方案。背景信息 大数据计算服务...

【停售公告】停止售卖云原生数据仓库AnalyticDB ...

阿里云停止售卖 云原生数据仓库AnalyticDB MySQL版 2.0 集群。停售对象 云原生数据仓库AnalyticDB MySQL版 2.0 集群 停售影响 您无法新购 云原生数据仓库AnalyticDB MySQL版 2.0 集群。云原生数据仓库AnalyticDB MySQL版 2.0 集群功能不再...

MaxCompute湖仓一体概述

MaxCompute提供湖仓一体方案,该方案可以打破数据湖与数据仓库割裂的体系,并将数据湖的灵活性、生态丰富能力与数据仓库的企业级部署能力进行融合,助力构建数据湖和数据仓库相融合的数据管理平台。本文介绍如何通过MaxCompute和异构数据...

典型场景

本文将介绍 云原生数据仓库AnalyticDB PostgreSQL版 的典型场景及产品功能优势。典型场景 数据仓库服务 您可以通过数据传输服务(DTS)或数据集成服务(DataX),将云数据库(例如RDS、PolarDB)或自建数据库批量同步到 云原生数据仓库...

账号类型

用户名和密码 访问云原生数据仓库MySQL版方式有很多种:通过阿里云控制台、客户端或者JDBC。通过客户端或者JDBC访问时,需要数据库的用户名和密码,前面提到云原生数据仓库MySQL版账号是基于阿里云账号体系,所以数据库账号和密码为阿里云...

测试过程

本文介绍性能测试包含的主要步骤。构建数据结构 AnalyticDB MySQL Presto 数据初始化 构建数据 导入数据 TPC-H测试集 有关测试过程的更多信息可参见 附录:测试过程详解。

使用kettle将本地数据导入AnalyticDB MySQL 2.0

本文以Excel为例,介绍如何通过kettle将本地Excel数据迁移到 云原生数据仓库AnalyticDB MySQL版 2.0集群。背景信息 Kettle是一款非常受欢迎的开源ETL工具软件,主要用于数据整合、转换和迁移。Kettle除了支持各种关系型数据库,HBase ...

通过实时计算Flink读写云原生数据仓库AnalyticDB ...

云原生数据仓库AnalyticDB PostgreSQL版 支持通过实时计算Flink读写数据。本文介绍如何通过Flink写入数据到 AnalyticDB PostgreSQL版 及读取 AnalyticDB PostgreSQL版 数据。通过实时计算Flink版写入数据到AnalyticDB PostgreSQL版 具体...

联系我们

如果您准备使用或正在使用云原生数据仓库AnalyticDB MySQL版,有任何疑问和建议,欢迎您加入云原生数据仓库AnalyticDBMySQL版钉钉群。开发者技术交流群,钉钉群号:23128105。湖仓版体验交流群,钉钉群号:33600023146。

使用OpenAPI

本文为您介绍使用 云原生数据仓库AnalyticDB PostgreSQL版 OpenAPI的基本信息及注意事项。关于使用阿里云OpenAPI的详细介绍,请参见 使用OpenAPI。基本信息 版本说明 版本号 说明 2016-05-03 AnalyticDB PostgreSQL版 实例使用该版本号调用...

使用OpenAPI

本文为您介绍使用 云原生数据仓库AnalyticDB MySQL版 OpenAPI的基本信息及注意事项。关于使用阿里云OpenAPI的详细介绍,请参见 使用OpenAPI。基本信息 版本说明 版本号 说明 2019-03-15 数仓版(3.0)集群使用该版本号调用API。2021-12-01 ...

概述

解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源(RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据库数据)和目标OSS数据仓库,系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中,...

转换计费方式

按量付费的 云原生数据仓库AnalyticDB MySQL版 3.0 集群可以转为包年包月集群。本文介绍按量付费转包年包月的操作说明。背景信息 按量付费变更为包年包月,需要支付包年包月费用,请确保余额充足。操作步骤 登录 云原生数据仓库AnalyticDB ...

应用开发向导

连接云原生数据仓库MySQL版推荐的方式是 druid-jdbc 或 tddl?当使用JDBC连接池连接云原生数据仓库MySQL版时,推荐使用Druid连接池,且尽量使用最新版本。请参考 Druid。关于Druid连接池配置,请务必按照如下配置项进行配置:maxActive:100...

连接2.0集群

在应用开发中,您可以通过以下方式连接 云原生数据仓库AnalyticDB MySQL版 2.0集群。通过代码连接 云原生数据仓库AnalyticDB MySQL版 2.0集群。通过客户端连接 云原生数据仓库AnalyticDB MySQL版 2.0集群。应用开发中通过代码连接2.0集群 ...

PHP访问(2.0版)

user_id为列名 } 使用mysqli连接 云原生数据仓库AnalyticDB MySQL版 2.0集群/连接云原生数据仓库AnalyticDB MySQL版2.0集群的url,可从云原生数据仓库AnalyticDB MySQL版控制台获取url连接信息$ads_server_name="mydbname-xxxx.ads-...

MaxCompute湖仓一体

MaxCompute湖仓一体方案通过数据仓库MaxCompute和数据湖共同实现,将数据湖的灵活性、生态丰富能力与数据仓库的企业级部署能力进行融合,助力于构建数据湖和数据仓库相融合的数据管理平台。本文为您介绍如何通过Dataphin管理MaxCompute和...

AnalyticDB MySQL湖仓版(3.0)使用流程

云原生数据仓库AnalyticDB MySQL版(简称ADB,原分析型数据库MySQL版)是云端托管的PB级高并发实时数据仓库,是专注于服务OLAP领域的数据仓库。本指南将指引您完成一次 AnalyticDB MySQL版 集群创建及使用。湖仓版(3.0)快速入门视频指导 ...

AnalyticDB MySQL数仓版(3.0)使用流程

云原生数据仓库AnalyticDB MySQL版(简称ADB,原分析型数据库MySQL版)是云端托管的PB级高并发实时数据仓库,是专注于服务OLAP领域的数据仓库。本指南将指引您完成一次 AnalyticDB MySQL版 集群创建及使用。数仓版(3.0)快速入门视频指导 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云原生大数据计算服务 MaxCompute 数据库备份 云原生数据仓库 AnalyticDB PostgreSQL版 云原生数据仓库AnalyticDB MySQL版 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用