云计算与大数据概述-云计算与大数据概述文档介绍内容-阿里云

普通集成

企业服务 大数据搜索与分析日志服务 大数据计算 云原生大数据计算服务 大数据（数加）Data Lake Analytics Databricks数据洞察 Elasticsearch Elasticsearch Serverless服务 Quick BI 实时数仓 Hologres 数据湖构建存储服务网盘与相册...

支持的云服务

AnalyticDB for MySQL 云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB for MySQL）是海量数据实时高并发在线分析（Realtime OLAP）云计算服务，与MaxCompute结合应用于大数据驱动业务系统的场景。通过MaxCompute离线计算挖掘，产出高质量...

阿里云MaxCompute数据源

概述云原生大数据计算服务(MaxCompute)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速地解决用户海量数据计算问题，有效降低企业成本，并保障数据...

什么是阿里云实时计算Flink版

阿里云实时计算Flink版是一套基于Apache Flink构建的⼀站式实时大数据分析平台，提供端到端亚秒级实时数据分析能力，并通过标准SQL降低业务开发门槛，助力企业向实时化、智能化大数据计算升级转型。产品概述阿里云实时计算Flink版是一种全...

连接诊断

若客户端无法正常连接云数据库MongoDB实例，您可以通过连接诊断功能诊断客户端的IP地址是否已正确配置在云数据库MongoDB实例的白名单中。使用限制 云数据库MongoDB仅单节点、副本集和分片集群实例支持连接诊断功能。操作步骤登录 MongoDB...

Navicat数据可视化

前提条件根据客户端网络环境配置 云数据库 SelectDB 版实例网络：客户端位于阿里云ECS服务器，且与 云数据库 SelectDB 版实例位于同一VPC下，无需配置，获取 云数据库 SelectDB 版实例的 VPC地址即可。其他情况，请为 云数据库 ...

限制说明

数据大小 云数据库 Memcache 版支持的单条缓存数据的 Key 最大不超过 1 KB，Value 最大不超过 1 MB，过大的数据不适合存储。事务支持 云数据库 Memcache 版不支持事务，有事务性要求的数据不适合写入，而应该直接写入数据库。使用场景当...

2023年

MaxCompute服务不可用赔付案例说明 2023-07-25 新增MaxCompute停止服务规格转换操作指引新说明阿里云云原生大数据计算服务MaxCompute将停止提供按量付费开发者版、包年包月套餐以及非预留计算资源服务，您需要将这些版本的计算资源转换为...

如何解决由网络环境导致的实例连接失败问题？

方法三：云服务器ECS实例使用云数据库MongoDB实例的公网地址连接云数据库MongoDB实例，如何申请公网地址并通过公网连接云数据库MongoDB实例，请参见如何通过公网连接MongoDB实例。这种方法的性能、安全性、稳定性较差，当涉及跨国网络时...

查询加速

概述 云数据库 SelectDB 版采用了MySQL网络连接协议，兼容标准的SQL语法，因此可直接采用兼容 MySQL生态的命令行工具、JDBC或ODBC驱动和可视化等工具连接云数据库 SelectDB 版实例，使用标准SQL语法进行数据分析。云数据库 SelectDB ...

云产品集成

常见云产品如下：大数据开发治理平台 DataWorks 实时计算 Flink 版数据库管理 DMS DataV 数据可视化 Quick BI 数据分析与展现前提条件已获取 OceanBase 数据库的基本连接信息，详细步骤请参见获取连接参数。大数据开发治理平台 ...

导入数据

本文以导入On Time数据集至clickhouse_demo数据库的分布式表ontime_local_distributed为例，介绍如何使用客户端clickhouse-client工具导入数据到 云数据库ClickHouse。前提条件已完成快速入门系列的如下步骤。新建集群创建账号设置白...

缓存数据持久化

当您使用云数据库RDS MySQL并需要提升数据处理速率和降低访问延迟时，阿里云为您提供了缓存数据持久化的高效方案，该解决方案通过整合云数据库Redis与RDS、云数据库Memcache与RDS协同工作，确保数据的高速访问和持久化存储，具备高吞吐、低...

阿里云电子政务云产品全家福

阿里云电子政务云平台价格与华北2公共云同等配置价格相同数据传输数据传输服务（Data Transmission Service）DTS支持关系型数据库、NoSQL、大数据（OLAP）等数据源间的数据传输。它是一种集数据迁移、数据订阅及数据实时同步于一体的数据...

产品简介

大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...

JindoData概述

JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现，主要包括JindoFS存储系统（原JindoFS Block模式）、...

超级计算集群概述

SCC主要用于高性能计算和人工智能、机器学习、科学计算、工程计算、数据分析、音视频处理等场景。在集群内，各节点间通过RDMA网络互联，提供高带宽低延迟的网络，保证了高性能计算和人工智能、机器学习等应用的高度并行需求。同时，RoCE...

常见问题

如何理解开源与云原生的大数据技术与产品？MaxCompute作为大数据平台，对业务数据是否有好的监控手段？MaxCompute的项目发挥什么作用？如何获取MaxCompute中的Accesskey_ID和AccessKey_Secret？现有账号的AccessKey被禁用，创建一个新的...

什么是云原生数据湖分析

云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB\NoSQL）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统...

操作审计事件数据迁移至MaxCompute

参数描述 大数据计算服务地域被投递数据的MaxCompute项目所在地域。说明操作审计会将审计日志投递至MaxCompute指定地域下的actiontrail_<阿里云账号ID>项目中。因为同一阿里云账号下MaxCompute项目名称唯一，若账号下已有actiontrail_...

新功能发布记录

2023-08-31 部分块存储概述云盘概述实例规格族发布高主频通用型实例规格族hfg8i。2023-08-31 部分实例规格族 Workbench 通过AliyunServiceRoleForECSWorkbench，Workbench可以获得云服务器ECS、ECI的访问权限。2023-08-28 全部 ...

什么是MaxCompute

MaxCompute是适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效...

使用流程

如果您是首次使用云原生数据湖分析DLA的用户，我们建议您先阅读以下部分：产品简介-本内容概述了云原生数据湖分析DLA的产品概念、产品优势及应用场景等内容。产品定价-本内容介绍了云原生数据湖分析DLA的产品定价、计费方式等信息。云原生...

云数据库 RDS MySQL 版收集表的统计信息

概述本文介绍云数据库 RDS MySQL 版如何收集表的统计信息。详细信息阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改...

整体架构

AnalyticDB MySQL版融合了分布式、弹性计算与云计算的优势，对规模性、易用性、可靠性和安全性等方面进行了大规模的改进，充分满足不同场景实时数据仓库的需求。支持更大规模的并发访问、更快读写能力以及更智能的混合查询负载管理等，...

无感集成（Zero-ETL）

方案概述在大数据时代，企业面临着大量分散在不同的系统和平台上的业务数据，为了有效地管理和利用这些数据，企业往往需要依赖于ETL工具对数据进行集中式管理。ETL是将上层业务系统的数据经过提取（Extract）、转换清洗（Transform）、...

开通MaxCompute和DataWorks

角色用途：用于授权MaxCompute访问大数据计算平台其他云产品，如Hologres等。绑定的角色策略：AliyunServiceRolePolicyForMaxComputeIdentityMgmt 权限策略详情：{"Statement":[{"Effect":"Allow","Action":"odps:ActOnBehalfOfAUser",...

云数据库服务协议

使用云数据库ClickHouse产品的用户与阿里云计算有限公司（简称“阿里云”）共同遵守《云数据库服务协议》，详细协议内容请参见云数据库ClickHouse服务等级协议。

块存储概述

创建一个空云盘：创建云盘挂载数据盘初始化数据盘并创建文件系统：初始化小于等于2 TiB数据盘（Linux）初始化小于等于2 TiB数据盘（Windows）初始化大于2 TiB数据盘创建一个包含备份数据的云盘：使用快照创建云盘挂载数据盘运维阶段 ...

2023年

2023年12月28日-MaxCompute升级公共云Endpoint 尊敬的MaxCompute用户：感谢您对云原生大数据计算服务MaxCompute的支持，MaxCompute将于北京时间2024年1月4日对华北2（北京）、华东2（上海）、华东1（杭州）、华南1（深圳）、华北3（张家口...

产品概述

产品概述数据总线 DataHub基本介绍阿里云流数据处理平台数据总线DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布(Publish)，订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。数据总线...

概述

但由于运行环境不一样，边缘端与云端支持的数据存储大部分是不相同的。类型描述源表流式数据存储，驱动流数据分析的运行。每个流数据分析任务必须提供至少一个流式数据存储。边缘端支持的类型如下所示。EdgeBus：边缘端消息总线（边缘端...

2024年

MaxFrame是由阿里云自研的分布式计算框架，支持Python编程接口、兼容Pandas接口且自动进行分布式计算，同时可直接使用MaxCompute计算资源及数据接口，与MaxCompute Notebook、镜像管理等功能共同构成了MaxCompute完整的Python开发生态。...

Serverless Presto概述

Serverless Presto是云原生数据湖团队基于Presto打造的交互式分析引擎，Presto开发的初衷就是为了解决使用Hive来进行在线分析速度太慢的问题，因此它采用全内存流水线化的执行引擎，相较于其它引擎会把中间数据落盘的执行方式，Presto在...

产品优势

云原生数据湖分析DLA（Data Lake Analytics）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库与消息实时归档建仓。DLA提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统Hadoop...

基础系列

RDS基础系列实例也称为单机版实例，只有单个数据库节点，计算与存储分离，性价比超高。重要 RDS基础系列实例只有一个数据库节点，没有备节点作为热备份，因此当该节点意外宕机或者执行重启实例、变更配置、版本升级等任务时，会出现较长...

ECS选型最佳实践

场景分类场景细分推荐规格族处理器与内存比数据盘关系型数据库高性能，依赖应用层高可用 i系列 1:4 本地SSD存储、高效云盘、SSD云盘中小型数据库 g系列，或其他内存占比为1:4的规格族 1:4 高效云盘、SSD云盘高性能数据库 i、r系列 ...

MaxCompute账单用量明细分析

背景信息 MaxCompute是一款大数据分析平台，其计算资源的计费方式分为包年包月和按量付费两种。MaxCompute每天以项目为维度进行计费，账单会在第二天06:00前生成。更多MaxCompute计量计费信息，请参见计费项与计费方式概述。MaxCompute会...

Serverless Spark概述

解决方案 Serverless Spark是云原生数据湖团队基于Apache Spark打造的服务化的大数据分析与计算服务。方案架构图如下所示：Serverless Spark将Spark、Serverless、云原生技术，深度整合到一起，相对于传统开源Spark集群版方案，具体以下...

云计算与大数据 概述

新品推荐

云计算与大数据概述