技术架构选型

本教程中使用阿里云大数据产品MaxCompute配合DataWorks,完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中,DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...

常见问题

答:阿里云技术服务专家在接收到用户服务请求后,将在一个工作日内进行服务响应,主动与用户就服务需求、服务方案沟通评估。3.大数据专家服务的服务方式提供哪些方式可选?答:大数据专家服务方式可以选择【现场】+【远程】技术支持方式...

常见问题

如何理解开源与原生的大数据技术与产品?MaxCompute作为数据平台,对业务数据是否有好的监控手段?MaxCompute的项目发挥什么作用?如何获取MaxCompute中的Accesskey_ID和AccessKey_Secret?现有账号的AccessKey被禁用,创建一个新的...

产品优势

AnalyticDB MySQL版 提供融合数据库、大数据技术于一体的原生企业级数据仓库服务,高度兼容MySQL,支持毫秒级更新,亚秒级查询。无论是数据湖中的非结构化或半结构化数据,还是数据库中的结构化数据,您都可使用 AnalyticDB MySQL 构建...

限制说明

数据大小 云数据库 Memcache 版支持的单条缓存数据的 Key 最大不超过 1 KB,Value 最大不超过 1 MB,过数据不适合存储。事务支持 云数据库 Memcache 版不支持事务,有事务性要求的数据不适合写入,而应该直接写入数据库。使用场景 当...

消息队列 Kafka 版的数据迁移至MaxCompute

本文介绍如何使用DataWorks数据同步功能,将 消息队列 Kafka 版 集群上的数据迁移至阿里云大数据计算服务MaxCompute,方便您对离线数据进行分析加工。前提条件 在开始本教程前,确保您在同一地域中已完成以下操作:消息队列 Kafka 版 ...

产品简介

主要包括:大数据技术架构方案咨询、数据解决方案POC、数据搬站迁方案咨询、跨地域迁移支持服务、数据专家高阶培训、专家运维保障综合服务、AI算法建模咨询、AI算法方案POC、AI标注人力服务等。阿里云大数据专家服务在金融、电商、...

数据分析整体趋势

随着Google等互联网企业崛起,以Hadoop为代表的基于传统x86服务器集群的大数据技术迅速发展,同时开源分布式数据库如Greenplum等也成为相应替代方案,为广大中小企业,尤其是互联网行业大大降低了数据分析的技术和成本门槛,还有分布式技术...

应用场景

云数据库MongoDB版支持单节点、副本集和分片集群三种部署架构,具备安全审计、时间点备份等多项企业能力。在互联网、物联网、游戏、金融等...大数据应用:使用云数据库MongoDB作为大数据存储系统,随时进行数据提取分析,掌握行业动态。

上海新能源汽车车辆基础数据

2019年开始上海市新能源汽车大数据平台从自建Hadoop集群迁移至阿里Lindorm+DLA Spark产品,有效解决了我们平台存储和计算的横向动态扩容瓶颈,同时借助其产品中间件LTS实现了我们平台数据的冷热分离,有效降低了数据存储成本,依托于阿里...

技术架构选型

本教程中使用阿里云大数据产品MaxCompute配合DataWorks,完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中,DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...

应用场景

大数据场景 云数据库HBase支持海量全量数据的低成本存储、快速批量导入和实时访问,具备高效的增量及全量数据通道,可轻松与Spark、MaxCompute等大数据平台集成,完成数据规模离线分析。优势如下:低成本:高压缩比,数据冷热分离,...

东软案例

业务/技术亮点 移动端到云端业务全链路海量运维大数据存储。指标、日志等多源异构监控数据融合分析。99.99%数据可用性的高可靠低成本存储。客户感言 利用阿里新一代 原生多模数据库 Lindorm“灵动”引擎驱动的政府、企业数字信息系统...

产品优势

监控是阿里巴巴集团多年来监控技术研究积累的成果,结合阿里计算平台强大的数据分析能力,为您提供产品监控、站点监控和主机监控等功能,为您的产品保驾护航。即开即用 监控无需您购买和开通。当您注册阿里账号后,自动开通...

授权信息

本文为您介绍 原生大数据计算服务 MaxCompute(MaxCompute)为RAM权限策略定义的操作(Action)、资源(Resource)和条件(Condition)。原生大数据计算服务 MaxCompute(MaxCompute)的RAM代码(RamCode)为 odps,支持的授权粒度为 ...

备份大小

本文介绍如何查看和管理云数据库专属集群MyBase MySQL的备份大小。备份大小=数据备份的大小+日志备份的大小 查看备份大小 登录 云数据库专属集群控制台。在页面左上角,选择目标地域。在左侧导航栏中,选择 实例列表>MySQL。找到目标实例,...

操作指南

一、数据专家服务流程指南 二、服务流程说明 用户可以根据自己实际需要,提前或者在问题发生时购买数据专家服务,服务项包含大数据技术架构方案咨询、数据解决方案POC、数据搬站迁方案咨询、跨地域迁移支持服务、数据专家高阶...

阿里MaxCompute数据

概述 原生大数据计算服务(MaxCompute)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速地解决用户海量数据计算问题,有效降低企业成本,并保障数据...

银泰商业

到2019年,随着银泰业务的持续发展,IDC中残余的少量数据库资源对系统的性能及稳定性带来了很的威胁,于是银泰寻求快速化的方案,最终在2019年9月份实现了数据库的100%化。业务挑战 以前进行核心交易库从Oracle转成云上MySQL,投入的...

实验介绍

原生大数据计算服务MaxCompute 实现底层加工计算,您需提前开通该服务。详情请参见 开通MaxCompute。云数据库RDS MySQL版 本案例中用于存储用户信息数据。案例已默认提供该MySQL数据源基本信息,您无需单独开通该服务。对象存储OSS 本...

版本发布记录

接入DataWorks任务调度 接入DataWorks任务调度,使得用户能够可视化轻松定制数据湖分析的数据处理流程,实现大数据WorkFlow。接入函数计算 接入函数计算,使得用户能够基于这两款Serverless化产品,构建原生Serverless工作流。接入...

配置概述

增加日志盘容量 为您介绍增加日志盘容量进行扩容的适用场景及操作注意事项,日志盘扩容为白名单功能,如需使用请联系云数据库 OceanBase 技术支持人员。设置存储自动扩容 为您介绍集群实例开启存储自动扩容的操作步骤。设置临时变配 为您...

典型场景

ETL离线数据处理 面对复杂SQL优化和海量数据大规模聚合分析等挑战,原生数据仓库AnalyticDB PostgreSQL版 具有如下技术优势:支持标准SQL、OLAP窗口函数和存储过程。ORCA分布式SQL优化器,复杂查询免调优。MPP多节点全并行计算,PB级数据...

快速体验

说明 本次实验数据仅作为阿里云大数据开发治理平台DataWorks数据应用实操使用,所有数据均为人工Mock数据技术选型 数据建模:数据开发治理平台 DataWorks数据建模(可选),标准版及以上版本可使用,需要单独购买。原始数据存储:...

保险行业解决方案与案例

推动技术架构和技术标准的统一,实现系统间整合和内通外联,同时,基于后台+小前端移动互联布局,联合信创合作方,攻克多项技术难题,在业内率先建设信创混合,其中数据库是整体分层架构中的关键组成部分,也是信创工作中的重点和难点...

引擎简介

与多模引擎共享存储,LindormDFS支撑,充分利用了对象存储的低成本与高可靠、块存储的高性能等优势,并通过高低速分层存储、副本共享去重、智能冷热转存等技术,面向用户提供弹性低成本、100%HDFS协议兼容的原生大数据存储能力,可使用...

使用限制

如果您的业务中集合加索引的数量可能会超过此限制,建议在创建实例时选择数据库版本为云数据库MongoDB 4.0或4.2,也可以升级数据库版本至云数据库MongoDB 4.0或4.2,升级方法请参见 升级数据版本。云数据库MongoDB副本集实例的4.4及...

未来规划

计算架构的核心逻辑就是通过虚拟化技术带来池化资源,原生数据库采用分布式数据库架构,实现规模扩展,每套数据库系统横跨多台服务器和虚拟机,带来了全新的系统管理挑战。其中最核心的挑战就是如何实现弹性以及高可用,实现按需按量...

自建Greenplum迁移到AnalyticDB PostgreSQL版

使用gpcopy迁移数据 提交工单 联系阿里云技术支持,并将AnalyticDB PostgreSQL版实例ID、自建Greenplum集群的IP地址和端口号、可用于迁移数据的Greenplum superuser权限账号和安装自建Greenplum集群的服务器的IP地址提供给阿里云技术支持。...

互联网金融:上海富友支付服务股份有限公司

在两痛点面前,我们选择与阿里瑶池数据库合作,使用原生数据库PolarDB,完成了技术架构和系统的升级。迁移方案 数据传输服务DTS是阿里提供的实时数据流服务,支持关系型数据库(RDBMS)、非关系型的数据库(NoSQL)、数据多维分析...

原生多模数据库 Lindorm助力数禾科技业务系统实现...

解决方案 原生多模数据库 Lindorm 历经阿里众多核心服务的规模验证,拥有相关技术领域的优秀技术团队,保障了使用过程的持续稳定、可靠,构建起坚实的离在线存储底座,使得客户可以聚焦于业务侧的发展。通过Lindorm LTS实现跨机房主备...

云盘(ESSD)型

原生内存数据库Tair 盘(ESSD)型基于盘ESSD研发,兼容Redis核心数据结构与接口,可提供容量、低成本、强持久化的数据库服务。盘(ESSD)型在降低成本和提升数据可靠性的同时,也解决了原生Redis固有的fork问题而预留部分内存的...

发展历程

2017年10月,TPC的benchmark适配MaxCompute,进行了全球首次基于公共的BigBench大数据基准测试,数据规模拓展到100 TB,成为首个突破7000分的引擎,性能达到7830 QPM。2017年6月,MaxCompute获得中国国际软件博览会金奖。2016年11月,在...

云盘(ESSD)型

Tair 盘(ESSD)型基于盘ESSD研发,兼容Redis核心数据结构与接口,可提供容量、低成本、强持久化的数据库服务。盘(ESSD)型在降低成本和提升数据可靠性的同时,也解决了原生Redis固有的fork问题而预留部分内存的问题。适用于兼容...

整体架构

技术架构 AnalyticDB MySQL版 采用原生架构,计算存储分离、冷热数据分离,支持高吞吐实时写入和数据强一致,兼顾高并发查询和吞吐批处理的混合负载。AnalyticDB MySQL 数仓版(3.0)主要用来处理高性能在线分析场景的数据。随着数据...

简介

系统兼容开源GeoMesa、GeoServer等生态,内置了高效的时空索引算法、空间拓扑几何算法、遥感影像处理算法等,结合云数据库HBase强大的分布式存储能力以及Spark分析平台能力,广泛应用于空间、时空、遥感大数据存储、查询、分析与数据挖掘...

Tair(Redis企业版)简介

阿里云数据库Redis企业版(又称阿里Tair),是基于阿里集团内部使用的Tair产品研发的上托管企业级内存数据库,从2009年开始正式承载阿里集团业务,历经天猫双十一、优酷春晚、菜鸟、高德等业务场景的磨练,是一款真正的企业级内存数据...

什么是数据库HBase

云数据库HBase是低成本、高扩展、智能的大数据NoSQL,兼容标准HBase访问协议,提供低成本存储、高扩展吞吐、智能数据处理等核心能力,是为淘宝推荐、花呗风控、广告投放、监控大屏、菜鸟物流轨迹、支付宝账单、手淘消息等众多阿里巴巴...

Serverless Spark概述

解决方案 Serverless Spark是原生数据湖团队基于Apache Spark打造的服务化的大数据分析与计算服务。方案架构图如下所示:Serverless Spark将Spark、Serverless、原生技术,深度整合到一起,相对于传统开源Spark集群版方案,具体以下...

什么是原生内存数据库Tair

原生内存数据库Tair 是阿里国产自研的原生内存数据库。在完全兼容Redis的基础上,提供了丰富的数据模型和企业级能力来帮助客户构建实时在线场景。同时,Tair与新型存储介质——持久内存的高效结合,相比内存型,成本降低30%以上,并...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云原生大数据计算服务 MaxCompute 数据库备份 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用