存储类型

本地HDD盘 10ms~300ms 互联网行业、金融行业等有大数据计算与存储分析需求的行业,进行海量数据存储和离线计算的业务场景。宽表引擎、时序引擎、搜索引擎、文件引擎 说明 购买实例时,如果 存储类型 选择 本地HDD盘,仅支持选择 本盘节点...

RDS搭配大数据计算服务实现规模数据计算

本文介绍RDS MySQL如何结合大数据计算服务MaxCompute使用。开放数据处理服务又称为大数据计算服务(MaxCompute,原名ODPS),可服务于批量结构化数据的存储和计算,提供海量数据仓库解决方案以及针对数据的分析建模服务。通过 数据集成 ...

准备环境

为保证您可以顺利完成本次实验,请您首先确保自己云账号已开通大数据计算服务MaxCompute、数据工场DataWorks和 人工智能平台 PAI。前提条件 注册阿里云账号,详情请参见 注册阿里云账号。实名认证,详情请参见 个人实名认证 背景信息 本次...

公告

该地域项目的存储、下载后付费账单归属的 产品明细 将从 大数据计算服务MaxCompute(包月)变成 大数据计算服务MaxCompute(按量付费),同时对应的用量明细选择的计量规格变成 大数据计算服务MaxCompute(按量付费)。当您使用的包年包月...

2022年

2022-11-01 全部地域 计算抵扣包和存储抵扣包 2022-10 功能名称 功能描述 发布时间 发布地域 相关文档 支持数据结构由 project.table 升级为 project.schema.table,方便与三层结构数据数据源对接。MaxCompute项目(Project)作为基本...

授权信息

本文为您介绍 云原生大数据计算服务 MaxCompute(MaxCompute)为RAM权限策略定义的操作(Action)、资源(Resource)和条件(Condition)。云原生大数据计算服务 MaxCompute(MaxCompute)的RAM代码(RamCode)为 odps,支持的授权粒度为 ...

文档修订记录

DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务,需先将已创建的数据源或集群绑定至数据开发...

2022年

基于MaxCompute的智能推荐解决方案 基于MaxCompute+开放搜索的电商、零售行业搜索开发实践 基于MaxCompute+PAI的用户增长方案实践 基于MaxCompute的实时数据处理实践 基于MaxCompute分布式Python能力的规模数据科学分析 基于MaxCompute+...

新功能发布记录

该功能结合全密态访问控制模块,可限制数据库内数据库用户对数据操作的访问控制,避免非授权访问,可确保数据对包括DBA在内的任何数据库用户都可用不可见,实现数据私有化。支持使用索引加速插件、更多加密数据类型、算子及子句。09-28 全...

控制台发布记录

11月28日 计算包和Serverless资源包更名说明 支持下载备份文件 支持将集群备份集对应的备份文件下载到您的本地(CSV、SQL或Parquet格式),用于其他用途,例如:查询备份里的数据 查询过去某个时间点的数据 在本地保存一份备份 下载备份...

数据分析作业

MaxCompute是适用于数据分析场景的企业级SaaS模式云数据仓库,支持在多种工具上使用MaxCompute运行大数据计算分析作业。如果您需要进行简单的查询等数据分析作业,推荐您使用SQL查询或DataWorks的临时查询等工具,高效便捷地完成数据分析...

企业级状态后端存储介绍

GeminiStateBackend是一款面向流计算场景的KV存储引擎,作为实时计算Flink版产品的默认状态存储后端(StateBackend)。本文为您介绍企业级状态后端存储GeminiStateBackend的核心设计,以及其与RocksDBStateBackend的性能对比情况。整体介绍...

DataWorks V3.0

MaxCompute:大数据计算服务MaxCompute(原ODPS)是一种快速、完全托管的EB级大数据计算引擎,是规模离线数据仓库的核心引擎。MaxCompute是DataWorks最早支持,且最成熟完备的计算引擎,目前已基本覆盖MaxCompute的所有功能。详情请参见 ...

将云消息队列 Kafka 版的数据迁移至MaxCompute

本文介绍如何使用DataWorks数据同步功能,将 云消息队列 Kafka 版 集群上的数据迁移至阿里云大数据计算服务MaxCompute,方便您对离线数据进行分析加工。前提条件 在开始本教程前,确保您在同一地域中已完成以下操作:云消息队列 Kafka 版 ...

实验介绍

云原生大数据计算服务MaxCompute 实现底层加工计算,您需提前开通该服务。详情请参见 开通MaxCompute。云数据库RDS MySQL版 本案例中用于存储用户信息数据。案例已默认提供该MySQL数据源基本信息,您无需单独开通该服务。对象存储OSS 本...

计算设置概述

计算引擎 说明 操作文档 离线计算引擎 MaxCompute 阿里原生的大数据计算平台,承载海量数据存储与计算能力,高效率与高稳定性。设置Dataphin实例的计算引擎为MaxCompute 实时计算引擎 阿里云实时计算Flink 阿里云新一代计算引擎Flink,支持...

快速体验

云原生大数据计算服务MaxCompute 实现底层加工计算,您需提前开通该服务。详情请参见 开通MaxCompute。云数据库RDS MySQL版 本案例中用于存储用户信息数据。案例已默认提供该MySQL数据源基本信息,您无需单独开通该服务。对象存储OSS 本...

RDS迁移至MaxCompute实现动态分区

本文为您介绍如何使用DataWorks数据集成同步功能自动创建分区,动态地将RDS中的数据迁移至MaxCompute大数据计算服务。前提条件 准备DataWorks环境 开通MaxCompute。在DataWorks上完成创建业务流程,本例使用DataWorks简单模式。详情请参见 ...

计量计费

本文为您介绍如何估算MaxCompute SQLML作业的费用。背景信息 通常情况下,每个算法组件由多个子任务组成。...查看账单信息 MaxCompute SQLML作业,在账单中体现的是 大数据计算服务MaxCompute+机器学习(PAI)两个产品的费用。

世纪联华

本文介绍如何通过函数计算、API网关、日志服务及表格存储云服务,再配合Serverless架构的快速扩容、弹性高可用的特性,轻松解决世纪联华流量突增及服务器需求过的问题。客户介绍 世纪联华是一个超过170余家,具有全国网点布局,在快速...

世纪联华

本文介绍如何通过函数计算、API网关、日志服务及表格存储云服务,再配合Serverless架构的快速扩容、弹性高可用的特性,轻松解决世纪联华流量突增及服务器需求过的问题。客户介绍 世纪联华是一个超过170余家,具有全国网点布局,在快速...

DataWorks On MaxCompute使用说明

DataWorks基于 云原生大数据计算服务MaxCompute 轻松构建离线数仓分析系统。MaxCompute可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理,保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发...

客户案例

同时,为了让用户获得良好的数据展示体验,我们要求每一次数据计算的时间不能太长(通常不超过 10s),而对于一些数据的读写请求,如果不使用并行计算能力,是很难达到这个要求的。然而数据的并行查询不能拖垮系统中的高优先级的小请求...

大数据AI公共数据集分析

本教程通过DataWorks,联合云原生大数据计算服务MaxCompute,使用数据AI公共数据集(淘宝、飞猪、阿里音乐、Github、TPC等公共数据),指导您如何快速进行数据分析,快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...

双11多维度饼图

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...

2023年

MaxCompute服务不可用赔付案例说明 2023-07-25 新增MaxCompute停止服务规格转换操作指引 新说明 阿里云云原生大数据计算服务MaxCompute将停止提供按量付费开发者版、包年包月套餐以及非预留计算资源服务,您需要将这些版本的计算资源转换为...

计算费用(按量付费)

当您购买按量付费规格后,MaxCompute会对SQL、MapReduce、Lightning(交互式分析)、Spark、Mars(数据科学)和MCQA(查询加速SQL)计算类型按量付费。本文为您介绍不同计算类型下的计费规则。背景信息 MaxCompute是以作业的执行情况作为...

技术架构

数据传输服务(Data Transmission Service,简称DTS),支持关系型数据库、NoSQL、大数据数据源,集数据迁移、订阅及实时同步功能于一体,能够解决公共云、混合云场景下,远距离、毫秒级异步数据传输难题。其底层基础设施采用阿里双11...

文档更新动态(2022年之前)

新功能 网络连通解决方案 2021年08月24日 数据服务:支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度要求的业务场景,Dataphin支持为项目添加加速计算源,且完成Dataphin数据源开发后,您可以手动...

发展历程

产品荣誉 2022年11月,自研一体化大数据计算平台和数据仓库产品ODPS获世界互联网领先科技成果奖。2022年8月,MaxCompute在TPCx-BB 100TB标准测试中,连续6连贯全球冠军,保持性能和性价比第一。2021年12月,IDC发布《IDC MarketScape:中国...

技术原理

分析型查询指的是涉及数据量较计算比较复杂的查询,例如对一定时间区间内的数据进行聚合。相比于业务中常见的简单查询,这类查询往往要执行数秒甚至数分钟,需要消耗较多的计算资源。为了加速复杂分析型查询,PolarDB-X将计算任务切分...

PERCENTILE_APPROX

array<double>percentile_approx(double[,double],array([,<p2>.])[,])命令说明 percentile_approx 是从编号1开始计算,假设某列 n 条数据计算该列的 p 百分位点,则 percentile_approx 会先对该列进行升序排序,假设排序后该列数据为...

同步方案概览

数据同步功能帮助您实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文将介绍数据同步功能支持的数据库、同步类型和同步拓扑。说明 数据同步在某些...

功能更新动态(2022年之前)

2021年08月19日 华北2(北京)、华东1(杭州)网络连通解决方案 2021年08月24日 华南1(深圳)2021年08月26日 华东2(上海)数据服务:支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度要求的业务...

2023年

该地域项目的存储、下载后付费账单归属的 产品明细 将从 大数据计算服务MaxCompute(包月)变成 大数据计算服务MaxCompute(按量付费),同时对应的用量明细选择的计量规格变成 大数据计算服务MaxCompute(按量付费)。当您使用的包年包月...

历史功能发布记录(2023年及之前)

2023年12月 功能名称 功能概述 发布时间 相关文档 计算巢精选模板中新增使用容器服务部署计算巢服务的模板 计算巢精选模板新增容器方式部署,您可以通过选择对应的容器方式快速部署服务。2023-12-31 使用容器服务部署多租版全托管WordPress...

支持的数据库

数据同步 数据同步功能帮助您实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等多种业务场景。同步支持的数据库、版本和同步类型以及配置文档,请参见...

概览

目前,PolarDB 针对计算节点的使用量,提供了 三 种计费方式:按量付费+固定规格计算包(推荐)、按量付费和包年包月,分别对应不同的价格方案。这 三 种方案均可搭配存储包使用。专家面对面 若您对计算节点价格问题,可通过钉钉搜索群号...

2.0数据类型版本

本文为您介绍MaxCompute 2.0数据类型版本的定义、使用场景、支持的数据类型以及与其它数据类型版本的差异。定义 项目空间选择数据类型版本为2.0数据类型版本时,项目空间的数据类型属性参数定义如下。setproject odps.sql.type.system.odps...

读取OSS数据

如果您需要对数据进行反复计算或对计算的高效性比较敏感,推荐先在MaxCompute项目中创建一个与OSS外部表Schema相同的内部表,然后将OSS上的数据导入MaxCompute内部表,在内部表上执行复杂查询语句,以便获得更高的计算性能。命令示例如下。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生大数据计算服务 MaxCompute 云数据库 RDS 数据库备份 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用