什么是物联网平台
消息通信 基于物联网平台，开发设备管理的通信模式是什么样的？设备上报数据至物联网平台后，如何存储到数据库（MySQL、SQL Server）？物联网平台和消息队列（RocketMQ）都是用于消息通信的产品，它们有什么区别？设备发送给物联网平台的...
并行查询
混合并行 混合并行是指分区间和分区内都可以并行执行，以达到分区表整体的并行执行，这是并行度最高的一种并行查询。EXPLAIN(COSTS OFF)select*from prt1;QUERY PLAN-Gather Workers Planned:8->Parallel Append->Parallel Seq Scan on prt...
并行查询
混合并行 混合并行是指分区间和分区内都可以并行执行，以达到分区表整体的并行执行，这是并行度最高的一种并行查询。EXPLAIN(COSTS OFF)select*from prt1;QUERY PLAN-Gather Workers Planned:8->Parallel Append->Parallel Seq Scan on prt...
并行查询
混合并行 混合并行是指分区间和分区内都可以并行执行，以达到分区表整体的并行执行，这是并行度最高的一种并行查询。EXPLAIN(COSTS OFF)select*from prt1;QUERY PLAN-Gather Workers Planned:8->Parallel Append->Parallel Seq Scan on prt...
什么是Deepytorch Training（训练加速）
更多信息，请参见 什么是AI通信加速库Deepnccl。使用Deepytorch Inference工具对Torch模型提供高性能的推理加速，通过即时编译技术对模型进行推理优化，从而实现高效、快速的推理加速效果。更多信息，请参见 什么是Deepytorch Inference...
深度解析PolarDB数据库并行查询技术
分析统计的复杂算子的并行 对于一个分析统计的需求，GROUP BY操作是不可避免的操作，尤其对大量的JOIN结果再做GROUP BY操作，是整个SQL中最费时的一个过程，因此GROUP BY的并行也是并行查询引擎必须优先解决的问题。以年度消费TOP10客户的...
并行安全性
为函数和聚集加并行标签 规划器无法自动判定一个用户定义的函数或者聚集是并行安全、并行受限还是并行不安全，因为这需要预测函数可能执行的每一个操作。一般而言，这就相当于一个停机问题，因此是不可能的。甚至对于可以做到判定的简单...
并行INSERT
趋于平缓的原因是并行写入只能在读写节点上进行，写入速度因多个写入进程对表页面扩展锁的争抢而跟不上查询速度，成为瓶颈。示例 创建两张表 t1 和 t2，并向 t1 中插入数据。CREATE TABLE t1(id INT);CREATE TABLE t2(id INT);INSERT INTO ...
使用多机MPP对海量数据分析提速
本文介绍了多机并行执行能力的技术背景、技术原理、适用场景以及使用说明等内容。背景信息 列存索引（IMCI）是PolarDB的HTAP解决方案。随着用户查询数据量、查询复杂度以及对OSS等外部表的查询需求的增加，单个只读列存节点已无法满足海量...
并行INSERT
趋于平缓的原因是并行写入只能在读写节点上进行，写入速度因多个写入进程对表页面扩展锁的争抢而跟不上查询速度，成为瓶颈。示例 创建两张表 t1 和 t2，并向 t1 中插入数据。CREATE TABLE t1(id INT);CREATE TABLE t2(id INT);INSERT INTO ...
并行步骤
并行步骤包含以下属性：（必需）type：parallel表示该步骤是并行步骤。（必需）name：步骤名称。（必需）branches：多个分支，数组类型，每个元素对应一个分支。（必需）steps：定义了分支所对应的多个串行步骤。（可选）end：当前步骤结束...
Hash Join的并行加速
并行策略 上图中是并行度为4的并行查询计划（即 PolarDB 会启用4个Worker来执行查询）。其中 t1 表会执行Parallel Scan，即由4个Worker分别扫描这个表。每个Worker使用 t1 的一部分数据建立各自的Hash表，再和整个 t2 表执行JOIN操作，最后...
并行（Parallel）
请参见 输入构造器 Branches ParallelBranch 是 并行分支。详见 ParallelBranch OutputConstructor map[string]any 否 输出构造器。请参见 输出构造器 Next string 否 当前状态的下一状态。当End取值为true时，无需指定。my-next-state End...
计划加速
QUERY PLAN-PartitionedTableScan on prt1(cost=0.00.1.00 rows=1 width=40)->Seq Scan on prt1(cost=0.00.1.00 rows=1 width=40)(2 rows)并行查询 PolarDB PostgreSQL版 支持分区表的 并行查询，它能很好的处理大规模数据的查询。...
计划加速
QUERY PLAN-PartitionedTableScan on prt1(cost=0.00.1.00 rows=1 width=40)->Seq Scan on prt1(cost=0.00.1.00 rows=1 width=40)(2 rows)并行查询 支持分区表的 并行查询，它能很好的处理大规模数据的查询。和 Append 一样，...
LLM on DLC-Megatron on DLC最佳实践
附录：PTD-P并行技术原理介绍 大规模并行训练的一个关键因素是并行训练策略的选择。在 Efficient Large-Scale Language Model Training on GPU Clusters Using Megatron-LM 和 Reducing Activation Recomputation in Large Transformer ...
通信消息相关问题
自定义Topic通信数据的标准JSON格式是什么？物模型通信报错“5092-property not found”属性设置的设备响应，报错6335 真实的设备接入需要与产品中的设备保持同一个Topic吗？物联网平台如何将同一个消息发送到多个设备上？通信Topic订阅 ...
使用自定义Topic通信
背景信息 物联网平台Topic定义和通信说明，请参见 什么是Topic 和 使用Topic通信。应用场景 服务端下发消息到设备端 服务端调用 Pub，可向指定的自定义Topic发布消息。设备通过订阅该Topic，接收来自服务端的消息。设备端发送消息到服务端 ...
如何备份RDS只读实例
常见问题 Q：通过内网IP配置的备份计划出现连接源实例失败的情况，可能原因及解决方法是什么？A：可能原因：本文方法二中的IP是一个即时的内网IP，当只读实例发生克隆、迁移可用区、切换VPC、切换交换机时，即时内网IP可能会发生变化，从而...
循环（Map）
循环状态类似于编程语言中的 foreach，不同之处是这里的迭代是并行执行的。执行并行循环步骤会并发执行输入参数中的每个元素的处理器状态。当所有分支执行结束后，默认将输出一个包含所有分支结果的map[string]any，然后通过输出构造器将...
RDS MySQL只读实例逻辑备份
常见问题 Q：通过内网IP配置的备份计划出现连接源实例失败的情况，可能原因及解决方法是什么？A：可能原因：本文方法二中的IP是一个即时的内网IP，当只读实例发生克隆、迁移可用区、切换VPC、切换交换机时，即时内网IP可能会发生变化，从而...
什么是Topic
物模型Topic：物模型是对设备实际功能的抽象，从 属性、服务 和 事件 三个维度，分别描述了该实体是什么、能做什么、能提供什么信息。例如智能风扇的开关状态是属性，开关的操作是服务，报警是事件。物模型的概念和使用，请参见 什么是物...
设备使用物模型通信
物联网平台物模型通信Topic定义和通信说明，请参见 什么是Topic 和 使用Topic通信。设备与物联网平台进行物模型通信时，物模型数据的Alink JSON格式和Topic说明，请参见 设备属性、事件、服务 和 设备期望属性值。使用优势 物模型是物联网...
压测场景的结构和数据分配
常见的压测场景结构和数据分配规则 具体请参考下图：图例说明如下：业务会话1和业务会话2是并行关系。业务会话类似于一个事务，业务会话内的所有压测API，严格遵循先后顺序。当前API的请求发起依赖前置API的请求处理完成或者超时异常。说明...
压测场景的结构和数据分配
常见的压测场景结构和数据分配规则 具体请参考下图：图例说明如下：串联链路1和串联链路2是并行关系。串联链路类似于一个事务，串联链路内的所有压测API，严格遵循先后顺序。当前API的请求发起依赖前置API的请求处理完成或者超时异常。说明...
配置ECI Pod在ClusterIP同步后再创建
由于ECI Pod和负责同步Service的组件是并行启动运行的，当集群中存在大量Service和Endpoint时，可能会出现因ClusterIp未同步而导致Pod访问超时的情况。本文介绍如何配置ECI Pod在ClusterIP同步后再创建，确保Pod中的容器在访问Service时，...
快速开始
阶段之间可以是串行也可以是并行的；任务：在阶段中具体需要完成的动作，目前任务主要包含两类，一类是与工作区相关的（AgentJob）以及与工作区无关的（Agentless Job），工作区相关任务会在固定的工作目录中执行用户定义的任务。而工作区...
消息通信说明
通信Topic必须符合标准MQTT协议的Topic规范，Topic更多详细说明，请参见 什么是Topic。自定义通信Topic直接使用设备上报的原始自定义Topic，设备下行通信Topic与上行通信Topic一致。物联网平台支持的通信Topic与标准MQTT协议通信Topic的...
物联网平台通信方式概述
背景信息 设备通过消息Topic实现消息的发送和接收，消息通信Topic的定义、使用和分类说明，请参见 什么是Topic。设备上报的原始数据格式，需您在设备端完成开发。阿里云物联网平台提供的设备端Link SDK，可实现设备快速接入物联网平台并...
什么是AI分布式训练通信优化库AIACC-ACSpeed
AIACC-ACSpeed（AIACC 2.0-AIACC Communication Speeding）是阿里云推出的AI分布式训练通信优化库AIACC-Training 2.0版本。相比较于分布式训练AIACC-Training 1.5版本，AIACC-ACSpeed基于模块化的解耦优化设计方案，实现了分布式训练在兼容...
什么是高速通道
阿里云高速通道（Express Connect）可在本地数据中心IDC（Internet Data Center）和云上专有网络VPC（Virtual Private Cloud）间建立高速、稳定、安全的私网通信。高速通道的物理专线数据传输过程...相关产品 什么是专有网络 什么是云企业网
一机一密
更多信息，请参见 什么是Topic。网关子设备认证流程 网关设备注册方法，与直连设备相同。本文以网关设备的一机一密MQTT注册方法为例，介绍网关代理子设备注册的流程。创建产品：为网关和子设备分别创建对应产品。网关对应产品的 节点类型 ...
使用Topic通信
定义Topic后，设备可以通过Topic与物联网平台通信，从而实现设备、物联网平台、业务服务器、其他云产品之间的通信。前提条件 使用物模型Topic通信，需要先 添加物模型。使用自定义Topic通信，需要先定义产品Topic类，具体步骤请参见 使用...
设备接入概述
物模型：用户基于物模型定义设备属性、事件、服务，通过物模型的格式上报/下发，请参见 什么是物模型 和 设备使用物模型通信。物模型是物联网平台的核心能力，使用物模型的优势：数据结构化存储：简化后续数据开发流程。状态缓存（设备影子...
组播概述
背景信息 什么是组播 组播是一种网络通信模式，通常应用于一个服务器同时向一组客户端（点对多点）发送相同数据报文的网络通信场景。例如在线直播、视频会议、金融交易行情数据同步、远程教育和网络电视等。组播的优势 在点对多点的网络...
等保三级预检合规包
什么是等保2.0 等保2.0是指网络安全等级保护制度2.0国家标准，该标准已于2019年05月13日正式发布，并于2019年12月01日正式实施。等保2.0的发展和演进史如下图所示。等保2.0的重要变化 云上信息系统纳入检测范围。基于等保1.0的网络和信息...
并行查询
功能介绍 并行查询是基于图化架构对查询功能的扩展，将一次查询任务拆分给多个线程，来减少整体查询的延时。用户可以在query中指定并行查询的并发度。并行查询功能适用于容易发生seek timeout，导致召回结果不完全的搜索场景，例如：存在...
并行查询
功能介绍 并行查询是基于图化架构对查询功能的扩展，将一次查询任务拆分给多个线程，来减少整体查询的延时。用户可以在query中指定并行查询的并发度。并行查询功能适用于容易发生seek timeout，导致召回结果不完全的搜索场景，例如：存在...
开启时空并行查询
并行查询原理 PG并行查询是表级的并行，其并行查询示意图如下。注意事项 并行查询的worker数量越大，查询时CPU负载越重，对于CPU负载本身较重的场景建议woker数量设置为2较合适，即max_parallel_workers_per_gather=2。对于服务器内存有限...
开启时空并行查询
并行查询原理 PG并行查询是表级的并行，其并行查询示意图如下。注意事项 并行查询的worker数量越大，查询时CPU负载越重，对于CPU负载本身较重的场景建议woker数量设置为2较合适，即max_parallel_workers_per_gather=2。对于服务器内存有限...
- 产品推荐
- 这些文档可能帮助您