并行INSERT

本文介绍了的并行INSERT功能。简介 支持弹性跨机并行查询(ePQ)特性,通过利用集群中多个计算节点来提升查询性能。同时,ePQ也支持在读写节点上通过多进程并行写入,实现对 INSERT 语句的加速。ePQ的并行 INSERT 功能用于加速 INSERT INTO...

并行INSERT

本文介绍了 PolarDB PostgreSQL版 的并行INSERT功能。前提条件 支持的 PolarDB PostgreSQL版 的版本如下:PostgreSQL 11(内核小版本1.1.17及以上)PostgreSQL 14(内核小版本14.8.12.0及以上)说明 您可通过如下语句查看 PolarDB ...

将本地表并行导出至OSS引擎

将本地表并行导出至OSS引擎可以极大地提升数据导出效率。本文介绍了将本地表并行导出至OSS引擎的相关内容。使用限制 PolarDB MySQL版 集群的产品版本需为 企业版,集群版本需为8.0.1版本且修订版本为8.0.1.1.38及以上。仅支持并行导出单表...

弹性并行查询(Elastic Parallel Query)常见问题

并行加速效果不明显的原因有如下几种:通过 explain/*+FORCE_SLAVE()*/SELECT.查看执行计划,判断SQL是否完成了执行计划,查看是否使用了并行查询,在explain中如看到 Parallel scan 字段,则表明使用了并行查询。并行查询的基本原理是将...

PolarDB并行查询

串行优化流程中做针对并行执行的补强,例如修正table扫描方式等,这也是上面性能数据中Q6/Q12会有超线性加速比的原因。全算子统计信息推导+代价计算,补充了一系列的cost formula和cardinality estimation推导机制。自适应执行策略 在早期...

PolarDB MySQL版8.0.1版本发布日志

此时,查询结果中会返回不能使用列存引擎的原因。支持在Grouping字句中使用关联子查询,以及消除复杂关联子查询。多主集群的全局Binlog支持GTID(全局事务标识符)。优化Buffer Pool扩容功能,如自动取消前序缩容、及时扩容等。优化列存...

PolarDB处理TPC-H查询的挑战和机遇

由于历史原因,MySQL对于join的处理是重度依赖nest loop的,MySQL 8.0之前甚至没有hash join,直至现在也没有sort merge join,它专为nested loop join实现了两种优化:block nested loop join(BNL):为了减少内表的重复扫描次数,在外表...

并行计划

因为每个工作者只执行完成计划的并行部分,所以不可能简单地产生一个普通查询计划并使用多个工作者运行它。每个工作者都会产生输出结果集的一个完全拷贝,因而查询并不会比普通查询运行得更快甚至还会产生不正确的结果。相反,计划的并行...

算法管理

算法信息主要包括算法能力集(算法支持的视频检测及分析能力)、算法能力值(算法最多支持的可分析视频流数量)、用户自定义的算法名称及版本号以及存储算法包的OSS相关信息。算法能力集 算法能力集可以理解为算法的标签,指算法支持的视频...

时序异常检测

数据服务提供时序异常检测算法,采用智能时序算法,实时分析设备时序数据,准确感知设备异常现象。查看基本信息 在 物联网平台控制台 的 实例概览 页面,单击目标企业版实例卡片。在左侧导航栏,选择 数据服务>数据智能。在算法模板列表中...

并行查询配置参数说明

parallel_degree_policy Global 设置单个查询的并行度配置策略,取值范围如下:TYPICAL:PolarDB 选择查询并行度时不会考虑数据库负载(如CPU使用率等),而尽可能与 max_parallel_degree 设置的并行度保持一致。AUTO:PolarDB 会根据数据...

技术原理

反过来,当计划的并行部分产生大量的元组时,领导者将几乎全用来读取由工作者产生的元组并且执行 Gather 或 Gather Merge 节点上层计划节点所要求的任何进一步处理。在这些情况下,领导者所作的执行并行部分的工作将会很少。当计划的并行...

概述

物联网边缘计算提供算法应用,供您为视频设备配置算法,处理视频数据。同时提供算法服务,支撑您管理算法任务。背景信息 当前物联网行业中,算法开发没有统一的算法定义和开发规范,自主开发的成本高,是业务中的一大痛点。物联网边缘计算...

控制台操作指南

本文档介绍如何使用智能视觉ivision控制台完成基本操作任务。步骤1.登录官网 访问 阿里云官网,在右上角单击 登录。步骤2....在智能视觉3.0产品开通页面,勾选我已阅读并同意智能视觉3.0服务协议,单击 立即购买。开通完成后,单击进入 管理...

算法应用

本文主要描述V(Version)系列边缘一体机,配置算法应用的方法。前提条件 已接入视频设备到边缘一体机中。设备接入操作,请参见 添加视频设备。配置人脸识别应用前,请确保已配置底库服务。详细操作,请参见 算法服务。LE-V-B012和LE-V-B...

深度解析PolarDB数据库并行查询技术

本文主要介绍基于代价进行并行优化、并行执行的云数据库的并行查询引擎的关键问题和核心技术。背景信息 随着数据规模的不断扩大,用户SQL的执行时间越来越长,这不仅对数据库的优化能力提出更高的要求,并且对数据库的执行模式也提出了新的...

创建算法实例

您可根据业务需求,购买目标算法。购买完成后,会自动在当前企业版实例中创建对应算法的实例。本文介绍如何购买算法完成创建算法实例。背景信息 物联网平台数据服务针对每个数据智能算法提供以下额度,作为算法运行的规格资源。算法实例的...

安全算法

安全算法运用哈希脱敏、遮盖掩码、加解密等方式对敏感数据(如姓名、账号、手机号等)进行脱敏处理且保持数据原有格式,本文为您介绍如何查看和测试系统内置的安全算法。查看安全算法 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作...

安全算法

安全算法运用哈希脱敏、遮盖掩码、加解密等方式对敏感数据(如姓名、账号、手机号等)进行脱敏处理且保持数据原有格式,本文为您介绍如何查看和测试系统内置的安全算法。查看安全算法 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作...

并行操作

并行度参数 如果支持并行操作的函数未指定并行度或指定并行度为0,则使用GUC(Grand Unified Configuration)参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1,表示不支持并行执行。每个支持并行...

并行操作

并行度参数 如果支持并行操作的函数未指定并行度或指定并行度为0,则使用GUC(Grand Unified Configuration)参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1,表示不支持并行执行。每个支持并行...

对分区表使用跨机并行查询

功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示:支持range分区的并行查询。支持list分区的并行查询。支持hash分区的并行查询。支持分区裁剪。支持带有索引的分区表并行查询。支持分区表join查询。支持多级分区的并行查询 使用...

对分区表使用跨机并行查询

功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示:支持range分区的并行查询。支持list分区的并行查询。支持hash分区的并行查询。支持分区裁剪。支持带有索引的分区表并行查询。支持分区表join查询。支持多级分区的并行查询 使用...

概述

结合 PolarDB PostgreSQL版(兼容Oracle)存储计算分离的架构,可以做到弹性扩展:当算力不够时,可以弹性地增加只读节点,新增的只读节点加入分布式的并行计算中,而不需数据重新分片(Reshard)。不会出现数据倾斜问题。使用场景 日常...

概述

结合 PolarDB PostgreSQL版(兼容Oracle)存储计算分离的架构,可以做到弹性扩展:当算力不够时,可以弹性地增加只读节点,新增的只读节点加入分布式的并行计算中,而不需数据重新分片(Reshard)。不会出现数据倾斜问题。使用场景 日常...

开启时空并行查询

并行查询原理 PG并行查询是表级的并行,其并行查询示意图如下。注意事项 并行查询的worker数量越大,查询时CPU负载越重,对于CPU负载本身较重的场景建议woker数量设置为2较合适,即max_parallel_workers_per_gather=2。对于服务器内存有限...

开启时空并行查询

并行查询原理 PG并行查询是表级的并行,其并行查询示意图如下。注意事项 并行查询的worker数量越大,查询时CPU负载越重,对于CPU负载本身较重的场景建议woker数量设置为2较合适,即max_parallel_workers_per_gather=2。对于服务器内存有限...

开启时空并行查询

并行查询原理 PG并行查询是表级的并行,其并行查询示意图如下。注意事项 并行查询的worker数量越大,查询时CPU负载越重,对于CPU负载本身较重的场景建议woker数量设置为2较合适,即max_parallel_workers_per_gather=2。对于服务器内存有限...

负载均衡调度算法介绍

负载均衡会根据配置的调度算法,将来自客户端的请求按照对应的算法规则转发至相应的后端服务器。负载均衡支持轮询、加权轮询、加权最小连接数、一致性哈希等多种调度算法,用于支持不同的业务场景。本文列出所有负载均衡系列产品支持的调度...

数据智能概述

算法模板 物联网平台提供算法模板供您使用,您可以查看算法模板的详情信息,如:算法详细介绍、运行算法所需数据、算法产出的数据等。实例管理 您可以在算法实例页面,根据实际业务需求购买算法实例和对已购买的算法实例进行续费和升配。...

使用场景

该查询运行在另一个已经存在的并行查询内部。例如,如果一个被并行查询调用的函数自己发出一个 SQL 查询,那么该查询将不会使用并行计划。这是当前实现的一个限制,但是或许不值得移除这个限制,因为它会导致单个查询使用大量的进程。即使...

并行操作

设置并行度 如果支持并行操作的函数未指定并行度或指定并行度为0,则使用GUC(Grand Unified Configuration)参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1,表示不支持并行执行。您也可以在支持...

并行操作

设置并行度 如果支持并行操作的函数未指定并行度或指定并行度为0,则使用GUC(Grand Unified Configuration)参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1,表示不支持并行执行。您也可以在支持...

并行操作

设置并行度 如果支持并行操作的函数未指定并行度或指定并行度为0,则使用GUC(Grand Unified Configuration)参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1,表示不支持并行执行。您也可以在支持...

Hash Join的并行加速

PolarDB MySQL版 8.0版本提供了对Hash Join的并行执行支持,并不断丰富其并行执行策略。本文介绍如何在 PolarDB 的并行查询中使用Hash Join功能。简单并行Hash Join 前提条件 集群版本需为 PolarDB MySQL版 8.0 集群版,且Revision version...

算法配置版功能详解

算法配置版简介 算法配置版是AIRec智能推荐为中大型流量、有多个差异化页面需要使用推荐算法的场景打造的版本,算法配置版包括了全部行业运营版的功能与能力,在此之上,算法配置版更增加了实验平台功能,并拥有推荐算法召回链路与排序链路...

应用场景

GPU计算的处理优势在于拥有众多专用的并行计算单元以及超高的显存带宽,让多路大规模数据搬移和快速并行计算成为典型的计算模式,但该模式也导致了每路数据的处理延迟增加。在具有低延迟需求的在线业务场景中,例如语音识别等,在Batch值较...

并行资源控制策略配置

PolarDB 支持通过多种策略控制单个查询或全局的总并行度,以保证在资源负载允许的情况下选择合理的并行度。并行查询排队策略参数 max_parallel_workers 为单个节点内允许同时运行的最大并行worker线程数,超过 max_parallel_workers 后新...

Decrypt

不同密钥规格对应的加密算法与填充模式如下表所示。密钥规格 加密算法 填充模式 说明 Aliyun_AES_128 Aliyun_AES_192 Aliyun_AES_256 AES_GCM(默认值)不涉及 采用GCM模式进行AES加密。AES_CBC PKCS7_PADDING(默认值)NO_PADDING 采用CBC...

产品优势

阿里云工业视觉智能产品主要有以下几点优势:深度优化的模型 算法模型针对工业检测中样本图像语义信息弱、尺度变化大、背景复杂、特征组内差异大组间差异小的特点深度优化,在您再次定制优化前即拥有远优于开源算法的性能。无需专业算法...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
地址标准化 云工作流 加密服务 风险识别 智能开放搜索 OpenSearch 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用