什么是EMR on ACK

您可以将开源大数据服务部署在阿里云容器服务Kubernetes版(ACK)之上,利用ACK在服务部署和容器应用管理的优势,减少对底层集群资源的运维投入,以便于您可以更加专注大数据任务本身。形态对比 阿里云EMR提供on ECS和on ACK两种方式,以...

客户案例

基于金融云计算平台以及 OceanBase 的海量存储,网商银行拥有处理高并发金融交易、海量大数据和弹性扩容的能力,可以利用互联网和大数据的优势,给更多小微企业提供金融服务。唐家才 网商银行 CTO“网商银行选择 OceanBase 三地五中心部署...

自研内核

Statement Outline 当遇到数据变化、增减索引、参数变更等情况时,SQL执行计划会发生改变,导致数据库不稳定,阿里云利用Optimizer Hint和Index Hint让MySQL稳定执行计划。Fast Query Cache 针对原生MySQL Query Cache的不足,阿里云进行...

应用场景

前端的监控系统和大数据处理系统会利用 TSDB 的数据查询和计算分析能力进行业务监控和分析结果的实时展现。电力化工及工业制造监控分析 传统电力化工以及工业制造行业需要通过实时的监控系统进行设备状态检测,故障发现以及业务趋势分析。...

配置SAP HANA输出组件

覆盖数据策略下,当主键、约束冲突时,系统会先删除原数据,再插入整行新数据。解析方案 非必选项,选择输出数据前后的一些操作。解析方案 包括 填写准备语句 和 填写完成语句。输入字段 根据上游的输入,为您展示输入字段。输出字段 单击 ...

应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线,您可以实时接入APP、WEB、IoT和数据库等产生的异构数据,统一管理,并投递到下游的分析、归档等系统,构建清晰的数据流,让您更好的释放数据的价值。...

配置SAP HANA输出组件

覆盖数据策略下,当主键、约束冲突时,系统会先删除原数据,再插入整行新数据。解析方案 非必选项,选择输出数据前后的一些操作。解析方案 包括 填写准备语句 和 填写完成语句。输入字段 根据上游的输入,为您展示输入字段。输出字段 单击 ...

快速体验

DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力,本文以一个零售电商行业的数仓搭建实验为例,为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现,帮助您深入了解阿里云...

什么是DataWorks

DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎,为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起,DataWorks不断沉淀阿里巴巴大数据建设方法论,支撑数据中台建设,同时与...

备份策略设置

您可设置数据备份和Redo日志备份的备份策略,如数据自动备份的频率、数据备份文件保存时长、存储位置以及日志备份文件保存时长等。操作步骤 登录 PolarDB控制台。在控制台左上角,选择集群所在地域。找到目标集群,单击集群ID。在左侧导航...

互联网、电商行业离线大数据分析

概述 电商网站的销售数据通过大数据进行分析后,可以在屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据,触控大屏支持您自助查询数据,极地提高数据的可读性。应用场景 电商...

从MongoDB单节点实例迁移至副本集或分片集群实例

如果您的数据库小版本过期或者不在维护列表内,当执行 实例版本升级、数据迁移、变更实例配置、按备份点将备份数据恢复至新建实例、按时间点将备份数据恢复至新建实例 或 恢复云数据库MongoDB单个或多个数据库 等操作时,为保证提供更出色...

IoT数据自动化同步至云端解决方案

大数据分析是大数据完成数据价值化的重要手段之一,而进行大数据分析的第一步是让数据成功上云。解决方案 IoT数据自动化同步至云端解决方案主要包括存储原始数据和同步数据至分析系统两部分。IoT设备大量的数据通常以半结构化的形式存储。...

云数据库MongoDB版(单节点架构)全量迁移至云数据库...

数据库(单节点架构)目标数据库(所有架构)云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 有公网IP的自建数据...

MongoDB(无分片键)迁移至MongoDB(分片集群架构)

数据传输服务DTS(Data Transmission Service)支持在源端MongoDB的数据中分片键字段缺失的情况下,将数据迁移至分片集群架构的MongoDB中,并指定分片键的默认值。本文以 云数据库MongoDB版(副本集架构)为源且 云数据库MongoDB版(分片...

使用DTS将华为云文档数据库迁移至阿里云

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将华为云文档数据库迁移至阿里云MongoDB实例。DTS支持全量数据迁移及增量数据迁移,同时使用这两种迁移类型可以实现在本地应用不停服的情况下,平滑地完成数据库迁移。前提...

使用DTS将华为云文档数据库迁移至阿里云

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将华为云文档数据库迁移至阿里云MongoDB实例。DTS支持全量数据迁移及增量数据迁移,同时使用这两种迁移类型可以实现在本地应用不停服的情况下,平滑地完成数据库迁移。前提...

产品简介

大数据专家服务 大数据专家服务(Bigdata Expert Service)是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障,帮助用户...

云数据库Redis实例间单向数据迁移

如果您需要将一个 云数据库 Redis 版 实例的数据迁移到另一个 云数据库 Redis 版 实例中,且您未创建新实例,推荐您通过 备份集克隆、数据闪回功能 将数据克隆至新实例,若您已创建新实例,建议您通过数据传输服务DTS(Data Transmission ...

构建数据仓库

DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力,本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业:全行业...

数据投递

数据传输服务DTS(Data Transmission Service)提供的数据投递功能,用户可以通过SDK将各种类型的数据源投递到DTS,再由DTS同步至目标数据库,从而支持更多类型的数据源。应用场景 数据投递功能适用于以下任一场景:源端为DTS同步方案暂不...

通用数据开发

通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中,虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示:数据产生:业务系统每天会产生大量结构化的...

账单数据订阅及查询分析

DataWorks及MaxCompute:DataWorks基于MaxCompute等大数据引擎,支持您在线进行SQL分析、业务洞察、编辑和分享数据,以及将查询结果保存为可视化图表卡片,快速搭建可视化数据报告。订阅账单数据后,用户中心会将相关账单数据同步至指定...

数据标准

数据是由特定的环境产生的,这些环境因素包括生产者、时间、系统等,从而造成了同一个语义的数据,有多种不同的定义方法,给后期进行数据汇集和整合带来障碍。因此,数据处理的前奏就是数据标准化,数据标准作为一个统一的数据共识,在标准...

配置PolarDB输出组件

加载策略 选择加载策略:追加数据策略下,当指主键或约束冲突时,会提示脏数据错误。覆盖数据策略下,当主键或约束冲突时,会先删除原数据,再插入整行新数据。说明 PostgreSQL协议下加载策略不生效。解析方案 非必填项。解析方案 包括 ...

配置PolarDB输出组件

加载策略 选择加载策略:追加数据策略下,当指主键或约束冲突时,会提示脏数据错误。覆盖数据策略下,当主键或约束冲突时,会先删除原数据,再插入整行新数据。说明 PostgreSQL协议下加载策略不生效。解析方案 非必填项。解析方案 包括 ...

羲和分析计算引擎

比如:利用数据分布,直接进行基于特定数据的计算,避免分布式系统中数据和命令流交互的开销。利用数据存储的能力,下推谓词、聚合等计算,实现近存储的计算加速。利用数据模型中的范式依赖,数据数值类型等进行查询执行算法优化。

云产品集成

您可以使用 DMS 录入云数据库 OceanBase 的数据,通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能,帮助企业高效、安全地挖掘数据价值,助力企业数字化转型。什么是数据管理DMS 支持的数据库...

配置GoldenDB输出组件

同步其他数据源的数据至GoldenDB数据源的场景中,完成源数据源的信息配置后,需要配置GoldenDB输出组件写入数据的目标数据源。本文为您介绍如何配置GoldenDB输出组件。前提条件 已创建GoldenDB数据源,如何创建,请参见 创建GoldenDB数据源...

配置GoldenDB输出组件

同步其他数据源的数据至GoldenDB数据源的场景中,完成源数据源的信息配置后,需要配置GoldenDB输出组件写入数据的目标数据源。本文为您介绍如何配置GoldenDB输出组件。前提条件 已创建GoldenDB数据源,如何创建,请参见 创建GoldenDB数据源...

配置Impala输出组件

同步其他数据源的数据至Impala数据源的场景中,完成源数据源的信息配置后,需要配置Impala输出组件写入数据的目标数据源。本文为您介绍如何配置Impala输出组件。前提条件 已创建Impala数据源,如何创建,请参见 创建Impala数据源。进行...

配置Impala输出组件

同步其他数据源的数据至Impala数据源的场景中,完成源数据源的信息配置后,需要配置Impala输出组件写入数据的目标数据源。本文为您介绍如何配置Impala输出组件。前提条件 已创建Impala数据源,如何创建,请参见 创建Impala数据源。进行...

受众与核心能力

产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者,打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台,即可实现数据...

备份设置

存储类型为企业版或标准版PSL4、PSL5,数据备份按照存储位置可分为一级备份和二级备份,数据备份策略包括一级备份策略和二级备份策略。备份类型 参数 说明 一级备份 备份方式 自动备份的频率,可选择 常规备份 或 高频备份。常规备份(按...

实验介绍

数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品:一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集,...

快速体验

数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品:一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集、...

自动化营销概述

自动化营销,是通过可拖拽的画布式配置工具,制定差异化营销策略后,由系统自动执行的智能化产品。功能简介 自动化营销流程由三个部分组成:触发方式:目标人群:指定的人群进入流程,支持周期执行、定时执行。行为事件:当用户执行了指定...

用户价值

数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台,提供企业级数据资产构建能力和一致性使用体验,助力客户快速构建数据智能平台,实现数据资源统一管理,挖掘潜在规律,优化业务决策,让大数据真正的驱动客户业务。...

Delta Lake概述

Delta Lake以数据为中心,围绕数据流走向(数据从流入数据湖、数据组织管理和数据查询到流出数据湖)推出了一系列功能特性,协助您搭配第三方上下游工具,搭建快捷、易用和安全的数据湖。背景信息 通常的数据湖方案是选取大数据存储引擎...

JindoCache概述

您可以根据具体情况选择激进的元数据缓存策略或完全不缓存某些数据,以实现最佳的性能和资源利用效率。使用场景 JindoCache可以用于如下场景:OLAP(Presto查询):提高查询性能,缩短查询时间。DataServing(HBase):显著降低P99延迟,...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云数据库 RDS 数据库备份 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用