计量计费
本文为您介绍如何估算MaxCompute SQLML作业的费用。背景信息 通常情况下，每个算法组件由多个子任务组成。...查看账单信息 MaxCompute SQLML作业，在账单中体现的是 大数据计算服务MaxCompute+机器学习（PAI）两个产品的费用。
应用场景
本文将以部门场景和技术领域场景为例，为您介绍实时计算Flink版的大数据是实时化场景。说明 更多场景案例请参见 阿里云实时计算Flink版产品案例和解决方案汇总。背景信息 作为流式计算引擎，Flink可以广泛应用于实时数据处理领域，例如ECS...
分析业务过程
为理清数据之间的逻辑关系和流向，首先需要理解用户的业务过程，了解过程中涉及到的数据系统。您可以采用过程分析法，将整个业务过程涉及的每个环节一一列清楚，包括技术、数据、系统环境等。在分析企业的工作职责范围（部门）后，您也可以...
基本概念
通过数据集成服务，可将Lindorm数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。MongoDB 提供稳定可靠、弹性伸缩、完全兼容MongoDB协议的数据库服务。数据结构多样时，可以选择将结构化数据存储在Lindorm，...
IoT物联网平台
背景信息 使用规则引擎数据转发功能，将设备中的数据转发到函数计算，函数计算执行函数的业务脚本，最终实现丰富的业务功能。数据流转示意图如下。使用限制 目前，新版和旧版云产品流转功能均支持将数据流转到函数计算。与旧版云产品流转...
常见问题
什么样的软件可以入驻计算巢？计算巢服务是否收费？计算巢是否支持非阿里云环境？计算巢的自动交付和ROS或Terraform有什么区别？私有部署服务、全托管服务和代运维服务有什么区别？计算巢权限FAQ 如何判断是否已经开通计算巢服务商权限？...
RDS搭配大数据计算服务实现大规模数据计算
本文介绍RDS MySQL如何结合大数据计算服务MaxCompute使用。开放数据处理服务又称为大数据计算服务（MaxCompute，原名ODPS），可服务于批量结构化数据的...通过 数据集成 服务，可将RDS数据导入MaxCompute，实现大规模的数据计算，如下图所示。
方案背景
阿里云实时计算Flink版是一套基于Apache Flink构建的⼀站式实时大数据分析平台，提供端到端亚秒级实时数据分析能力，并通过标准SQL降低业务开发门槛，助力企业向实时化、智能化大数据计算升级转型。更多信息，请参见 什么是阿里云实时计算...
新建集群
不导入任何样例数据 计算单元（CCU）最大值 集群计算单元（CCU）的最大值。计算资源根据集群负载，按照CCU（ClickHouse Compute Units）粒度进行资源弹性扩展，弹性缩容不小于最小CCU配置规格，1CCU约等于1 Core 4 GiB。8 计算单元（CCU）...
常见问题
由于DTS的传输性能受DTS内部、源端和目标端数据库实例的负载、待传输的数据量、DTS实例是否存在增量任务、网络等多种因素影响，所以无法预估DTS任务所需的时间，若对性能有较高要求，建议选择性能上限较大的规格。关于规格的更多信息，请...
混合负载HTAP
说明 分析型查询指的是涉及数据量较大、计算比较复杂的查询，例如对一定时间区间内的数据进行聚合，相比于业务中常见的简单查询，这类查询往往要执行数秒甚至数分钟，需要消耗较多的计算资源。为了提高复杂分析型查询的速度，PolarDB-X 将...
技术原理
分析型查询指的是涉及数据量较大、计算比较复杂的查询，例如对一定时间区间内的数据进行聚合。相比于业务中常见的简单查询，这类查询往往要执行数秒甚至数分钟，需要消耗较多的计算资源。为了加速复杂分析型查询，PolarDB-X将计算任务切分...
基础概念
语法详述见 功能概览 使用过程中请注意：iGraph Gremlin语法与开源使用差异 其他相关服务 MaxCompute：大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布...
ECS资源复用版
ECS资源复用版是MaxCompute按量付费类型中的...则04:00~05:00的账单详情（部分字段）示例如下：产品 产品明细 消费时间 实例ID 计费项code 单价 用量 官网价 云原生大数据计算服务 MaxCompute 大数据计算服务MaxCompute（按量付费）2023-12-30...
支持的连接器
MySQL√流模式 SQL和DataStream 是 云数据库RDS MySQL版×流模式和批模式 SQL 是 大数据计算服务MaxCompute√流模式和批模式 SQL和DataStream 不支持更新和删除结果表数据，只支持插入数据。数据总线DataHub√流模式和批模式 SQL和...
其他问题
为什么不能在调度资源组上进行大数据计算？其他 如何设置任务优先级？如何查看任务优先级？周期任务与周期实例、补数据实例、测试实例是什么关系？DataWorks每晚将根据周期任务，批量生成第二天自动调度的周期实例，周期实例自动生成并且...
RDS术语
通过数据集成服务，可将RDS数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。Microsoft AD Active Directory，活动目录。微软提供的面向Windows Standard Server、Windows Enterprise Server以及Microsoft ...
RDS术语
通过数据集成服务，可将RDS数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。Microsoft AD Active Directory，活动目录。微软提供的面向Windows Standard Server、Windows Enterprise Server以及Microsoft ...
RDS术语
通过数据集成服务，可将RDS数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。Microsoft AD Active Directory，活动目录。微软提供的面向Windows Standard Server、Windows Enterprise Server以及Microsoft ...
RDS术语
通过数据集成服务，可将RDS数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。Microsoft AD Active Directory，活动目录。微软提供的面向Windows Standard Server、Windows Enterprise Server以及Microsoft ...
问题汇总
补数据 补数据功能说明 为什么小时分钟任务补数据选择了并行但实际不生效？为什么补数据选择业务时间后不运行，实例显示黄色，实例状态显示等待时间？...为什么不能在调度资源组上进行大数据计算？其他 如何设置任务优先级？
大数据安全治理的难点
如此多类型的用户，授权、管理难度加大，什么样的人员需要授予什么样的权限？如果他们离职、换部门了怎么办？这其中很有可能出现 权限蠕变、过度授权、离职撤权不彻底 的情况，这些都为数据安全事件埋下了隐患。入口 由于大数据系统要服务...
查看监控信息
若您选择的查询时间是24小时以内的某个时间段，计算方法为：查询失败率=（一分钟内的SQL失败数/一分钟内的SQL总数）*100%。若您选择的查询时间是24小时以外的某个时间段，计算方法为：查询失败率=（五分钟内的SQL失败数/五分钟内的SQL总数...
RDS术语
通过数据集成服务，可将RDS数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。Microsoft AD Active Directory，活动目录。微软提供的面向Windows Standard Server、Windows Enterprise Server以及Microsoft ...
自定义函数（邀测中）
AnalyticDB for MySQL 支持使用REMOTE_CALL函数远程调用函数计算服务（Function Compute，简称FC）中自定义的函数，以满足您在 AnalyticDB for MySQL 中使用UDF（用户自定义函数）的需求。前提条件 已提交Remote UDF功能的试用申请，并获得...
什么是视图计算
通过本文档，您可以了解到什么是阿里云视图计算产品，以及他涉及的产品和服务。视图计算（Visual Edge Computing）依托阿里云遍布全球的边缘节点，是面向视图设备（如摄像头、车载终端、消费电子等）上云场景提供连接、视图AI计算、视图云...
SQL增强操作
功能 是否支持 限制 云原生大数据计算服务MaxCompute-EXPLAIN 是 无 云原生大数据计算服务MaxCompute-CLONE TABLE 是 无 云原生大数据计算服务MaxCompute-参数化视图 是 创建参数化视图 不支持表值参数table。支持any以及MaxCompute的所有...
账单数据订阅及查询分析
相关介绍，请参见 什么是MaxCompute、什么是DataWorks、数据分析概述。费用说明 订阅及查询分析账单数据会产生如下费用：存储费用（MaxCompute收取）：账单数据会写入指定的MaxCompute表，产生存储费用。详情请参见 计费项与计费方式概述。...
公告
该地域项目的存储、下载后付费账单归属的 产品明细 将从 大数据计算服务MaxCompute（包月）变成 大数据计算服务MaxCompute（按量付费），同时对应的用量明细选择的计量规格变成 大数据计算服务MaxCompute（按量付费）。当您使用的包年包月...
什么是Dataphin
Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出，一站式提供数据采、建、管、用全生命周期的大数据能力，以助力企业显著提升数据治理水平，构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...
授权信息
本文为您介绍 云原生大数据计算服务 MaxCompute（MaxCompute）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。云原生大数据计算服务 MaxCompute（MaxCompute）的RAM代码（RamCode）为 odps，支持的授权粒度为 ...
数据分析整体趋势
存储计算分离：云计算的本质是资源高效池化，而数据库的两大核心组件是存储和计算。通过存储计算分离，做到两者解耦，资源池化，独立扩展，满足业务上资源隔离，数据共享的需求，是当下的架构趋势。计算分析一体化：传统数据分析方案是定期...
常见问题
数据安全中心对于结构化数据源的扫描机制是什么样的？数据安全中心扫描数据源中的字段名称、字段值综合判断该数据是否为敏感数据，只通过字段值无法判断数据是否敏感。例如：年龄数据。敏感数据识别是如何实现的？敏感数据识别是在完成数据...
基本概念
项目类型 引擎类型 联邦建模 联邦学习 多方安全建模 训练和预测 多方安全分析 分析 隐私求交 分析 隐私求交 隐私求交（Private Set Intersection，简称 PSI）是一种隐私计算方法，是将各参与方的样本数据做求交集处理。该方法可以保证在...
数据治理
存储量是实时的数据，存储趋势图（折线图）是某一时刻的快照，如果您现在的计算量很少（产生的临时表比较少）的话，两个确实会有一些差距。数据地图血缘展示延迟问题 血缘有最少一天的延迟 数据地图新建表搜不到 若数据地图表和表目前状态...
IDMapping在离线一体化解决方案
4、弱关系挖掘能力 针对没有特定强关联的数据，我们也提供一些解决方案，如多因素（规则）进行综合考虑与判定、将非确定条件中的属性进行相似的关联关系计算（向量计算、地理位置计算等手段），将各种真实数据的复杂情形做一些量化方法的...
数据库代理常见问题
目录 什么是数据库代理？通用型代理和独享型代理有什么区别？数据库代理是否占用主实例的QPS或者TPS？数据库代理地址和常规地址是否是一个地址？开通数据库代理后，实例原来的地址和只读实例的地址是否会被收回？数据库代理的内网网络类型...
云产品集成
在 DataWorks 添加 ApsaraDB For OceanBase 数据源的相关操作，请参见：什么是DataWorks 数据源概述 支持的数据源及同步方案 ApsaraDB For OceanBase数据源 实时计算 Flink 版 实时计算 Flink 版是阿里云提供的全托管 Serverless Flink ...
PyODPS常见问题
计算两点之间的距离有多种计算方法，例如欧氏距离、曼哈顿距离等，您可以定义一系列函数，在计算时根据具体情况调用相应的函数即可。def euclidean_distance(from_x,from_y,to_x,to_y):return((from_x-to_x)*2+(from_y-to_y)*2).sqrt()def ...
与标准SQL的主要区别及解决方法
本文为您列举MaxCompute SQL与标准SQL的区别及常见问题解决方法。MaxCompute SQL与标准SQL的基本区别 主要区别 问题现象 解决方法 应用场景 不支持事务（不支持Commit和Rollback，不推荐使用INSERT INTO）。建议代码具备幂等性，支持重新...
- 产品推荐
- 这些文档可能帮助您