分区表扫描算子
本文介绍了分区表扫描算子的使用限制、使用说明以及性能对比等内容。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.9.15.0及以上）说明 您可通过如下语句查看 PolarDB PostgreSQL版 的内核小版本的版本号...
分区表扫描算子
本文介绍了分区表扫描算子的使用限制、使用说明以及性能对比等内容。前提条件 支持的 PolarDB PostgreSQL版（兼容Oracle）的版本如下：Oracle 2.0（内核小版本2.0.14.15.0及以上）说明 您可通过如下语句查看 PolarDB PostgreSQL版（兼容...
如何设置查询表时全表扫描
概述 本文主要介绍Dataphin中计算引擎是MaxCompute时，如何设置查询表时全表扫描。详细信息 Dataphin中查询分区表不想设置分区条件时，需要在命令前添加 set odps.sql.allow.fullscan=true;更多 MaxCompute中SELECT语序 适用于 Dataphin
Quick BI加速引擎开启按日期加速，如何实现全表扫描
概述 本文主要描述了Quick BI加速引擎开启按日期加速，实现全表扫描的两种方法。详细信息 物理分区表的抽取必须指定分区，有两个方案可以解决：1.数据集改成自定义 sql，这样 Quick BI 会创建临时表，而不是直接从分区表取数。2.如果数据集...
Quick BI创建MaxCompute数据源的SQL数据集报全表扫描...
问题描述 用户创建MaxCompute数据源的SQL数据集，使用MaxCompute数据源报全表扫描错误。解决方案 SQL后面可以加上ds>0避开此问题。适用于 Quick BI 数据集
通过云计算资源扫描创建逻辑表
您可以将已存在物理数据库中的数据表，通过云计算资源扫描方式，导入数据资源平台系统，实现逆向创建逻辑表，本文介绍如何通过云计算资源扫描方式创建逻辑表。前提条件 已新建工作组“信息中心(xxzx)”，具体操作，请参见 新建工作组。已在...
多级分区表静态裁剪与并行扫描
本文介绍了的多级分区表静态裁剪与并行扫描功能。背景信息 随着数据量的不断增长，表的规模将会越来越大。为了方便管理和提高查询性能，用户一般会使用分区表，将大表拆分成多张子分区表，每张子分区表又进一步可以拆成二级子分区表，从而...
ModifyFullTableScan
调用ModifyFullTableScan接口设置或取消全表扫描。请求参数 参数名 类型 是否必须 说明 Action String 是 系统规定参数，取值：ModifyFullTableScan。DrdsInstanceId String 是 PolarDB-X实例ID。DbName String 是 数据库名。TableNames ...
SetupTable
调用SetupTable接口使用全表扫描。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 SetupTable ...
使用SQL查询数据时报错The sql scanned rows of main ...
问题现象 使用SQL查询数据时出现如下报错：[Message]:The sql scanned rows of main table exceeds the quota,main table rows quota is 100000 可能原因 如果使用SQL查询数据时使用的条件为非分区键，则会造成全表扫描数据，可能会出现...
如何高效扫描数据
PolarDB-X 1.0 支持高效的数据扫描方式，并支持在全表扫描时使用聚合函数进行统计汇总。本文介绍如何高效扫描 PolarDB-X 1.0 数据。常见的扫描场景 没有分库分表：PolarDB-X 1.0 会把原SQL传递到后端MySQL执行。这种情况下 PolarDB-X 1.0 ...
Quick BI图表内查询条件无法获取到查询字段值
问题描述 Quick BI图表内查询条件无法获取到...问题原因 查询控件是基于数据集查询，当没有指定分区的时候发生全表扫描的异常。解决方案 在数据集属性中开启全表扫描。对特定查询条件设置单独数据集。适用于 Quick BI 当前环境：公共云4.4.1
Quick BI数据集报“xxx is full scan with all ...
概述 MaxCompute数据源的分区表创建的数据集，需要指定分区条件的值或者开启全表扫描，才能正常使用。问题描述 通过数据表直接创建数据集。创建成功后预览时报错：null:INTERNAL:java.sql.SQLException:execute failed:ODPS-0130071:[0,0]...
TRUNCATE
将表清空。语法 TRUNCATE TABLE name[DROP STORAGE]...在这些情况下，检查有效性需要执行表扫描，而关键在于不会执行表扫描。TRUNCATE 不会运行表可能存在的任何用户定义的 ON DELETE 触发器。示例 截断表 bigtable：TRUNCATE TABLE bigtable;
数据表管理
本文介绍了在 PolarDB-X 1.0 控制台上对数据表进行调整拆分键、关闭全表扫描和查看表结构的方法。前提条件 您需要先 连接到数据库 并 使用SQL语句创建表 后，才能在控制台上管理数据表。功能介绍 调整拆分键 拆分键即分库或分表的数据表字...
自定义 HINT
全表扫描 要避免全表扫描对后端数据库的压力，请尽量减少全表扫描 HINT 使用。如需使用，也请加上合理的查询过滤条件。全表扫描会读取多个表的结果做合并，如果使用 LIMIT start,offset 得到的结果无法保证正确性。所以，全表扫描 HINT 仅...
Quick BI中SQL自定义数据集预览报错“RST_STREAM ...
问题描述 Quick BI中SQL自定义数据集预览时报错“null:INTERNAL:RST_STREAM closed stream.HTTP/2 error code: PROTOCOL_ERROR”。问题原因 对应的代码中是将ds设置为SQL参数，如下：FROM dwd_...或者数据集中开启全表扫描。适用于 Quick BI
在DMS中执行SQL后提示“当前SQL不满足数据库性能安全...
解决方案 可通过如下两种方式解决此问题：通过编辑安全规则配置项，修改 限制允许SQL全表扫描的最大值（MB）。具体操作，请参见 SQL窗口关系型数据库。修改执行计划 修改SQL：WHERE子句增加更多的过滤项，避免扫描无效数据。新增索引：给...
使用限制
Lindorm Ganos SQL的使用限制还包括以下几点：WHERE语句中，除了 ST_Contains、ST_DWithin 和 ST_DWithinSphere 时空函数，使用其他时空函数时会触发全表扫描。如果要强制使用全表扫描，需要在SQL语句中添加/*+_l_allow_filtering_*/关键字...
编码规范
全表扫描会占用大量资源，为提升处理效率，建议开启该功能。若关闭检查，请确保任务中无全表扫描的查询。禁止使用Flink原生DDL语句 系统计算设置已绑定实时计算引擎时才可设置。默认为 否。该配置选择 是，则无法在Flink SQL计算任务中编写...
编码规范
全表扫描会占用大量资源，为提升处理效率，建议开启该功能。若关闭检查，请确保任务中无全表扫描的查询。禁止使用Flink原生DDL语句 系统计算设置已绑定实时计算引擎时才可设置。默认为 否。该配置选择 是，则无法在Flink SQL计算任务中编写...
SQL查询计量计费
但是使用SQL查询数据的过程中，表扫描、索引查询等操作会消耗读写吞吐量。本文介绍了SQL查询功能的计费项及计费示例。注意事项 SQL本身不会有额外的费用，但是使用SQL查询数据过程中涉及到的表扫描、索引查询等操作会产生费用。使用SQL查询...
MaxCompute表的高级功能
避免全表扫描 在表设计时避免全表扫描。表设计是指建立分区表或者对扫描条件进行列设计，需要注意以下几点：对数据表进行合理的分区。把常用查询条件设置成列名。对常用查询条件进行Hash Clustering。在数据计算时避免全表扫描。您可以增加...
云数据源Alibaba Lindorm宽表
开启全表扫描 建议开启全表扫描，由于Lindorm宽表引擎为分布式存储，若不开启全表扫描，对非主键列进行过滤时，查询将报错。单击 连接测试，进行数据源连通性测试。测试成功后，单击 确定，完成数据源的添加。后续步骤 创建数据源后，您还...
分库分表
说明 在执行带有 WHERE 条件的 UPDATE、DELETE、SELECT 语句时，如果 SQL 语句中没有使用拆分键，或者虽然指定了拆分键但是范围太广，会导致 SQL 语句被分发到所有分库上执行（即全表扫描），且执行结果会在数据库访问代理中进行合并。全表...
CPU使用率高排查方法
PolarDB PostgreSQL版 在使用过程中，可能会出现CPU使用率异常升高甚至达到满载的情况。...对于全表扫描较多的表，可以在常用的过滤列上创建索引，使用索引扫描，减少全表扫描在内存中过滤不符合条件的记录所造成的CPU浪费。
计算成本控制
您可以通过以下几种策略来控制全表扫描问题：设置参数关闭全表扫描功能。目前支持Session级别和Project级别的控制。禁止session 级别全表扫描。set odps.sql.allow.fullscan=false;禁止project级别全表扫描。SetProject odps.sql.allow....
查看资源和引擎监控
平均每秒全表扫描数 每秒全表扫描次数。每秒SQL编译 实例中每秒编译的SQL语句数。每秒锁超时次数 实例中每秒锁超时次数。每秒死锁次数 实例中每秒锁定次数。每秒锁等待次数 实例中每秒锁等待次数。常见问题 RDS SQL Server CPU使用率高问题...
SELECT 语法
若没有条件，需要使用 HINT 指定具体的分库分表或全表扫描，否则 SQL 会报错。GROUP BY：表示聚合条件，可以是具体的列名或者表达式，暂不支持 HAVING 子句。ORDER BY：表示排序条件，可以是具体的列名或者表达式，可以自定升序 ASC（默认...
SQL 诊断概述
TopSQL 分析还提供了一些常用的快捷筛选，例如 全表扫描、多分区扫描 等。TopSQL 支持通过点击展开查看最后一次错误以及所有发生过的错误信息。单击列表右上方的 查看优化建议，您将会跳转到优化中心页面查看优化建议。单击列表右上方的 ...
分区剪裁合理性评估
使用数据时，如果指定了需要访问的分区名称，则只会读取相应的分区，避免全表扫描，提高处理效率，降低费用。分区剪裁是指对分区列指定过滤条件，使得SQL执行时只用读取表分区的部分数据，避免全表扫描引起的数据错误及资源浪费。但是分区...
测试分析及调优
amount/30产生全表扫描 convert(char(10),date,112)=′19991201′产生全表扫描 where salary<>3000 产生全表扫描 name like '%张' 产生全表扫描 first_name+last_name='beill cliton' 产生全表扫描 id_no in(′0′,′1′)产生全表扫描 ...
DescribeAnomalySQLList-查询可疑 SQL 列表
tester 示例 正常返回示例 JSON 格式 {"TotalCount":2,"RequestId":"473469C7-AA6F-4DC5-B3DB-A3DC0DE3C83E","AnomalySQLList":[{"Key":1,"DiagnosisRule":"全表扫描有索引未用","SQLText":"SELECT*FROM*WHERE*=?AND*=?ORDER BY*ASC",...
OpenAPI 导航
ModifyRdsReadWeight 设置读策略 DeleteFailedDrdsDB 删除创建/删除失败的库 DescribeShardDBs 查询分库列表 DescribeRdsList 查询数据库的 RDS 列表 ModifyFullTableScan 设置全表扫描 CreateReadOnlyAccount 创建只读账户 ...
连接 Navicat 客户端
数据访问代理不仅支持应用程序（如 JDBC）与 MySQL Client ...但需要注意的是，查询时，请勿在数据量很大的时候不加任何筛选条件地进行全表扫描，否则可能会给数据访问代理后台和物理库造成较大压力，引起业务系统查询耗时增长，甚至崩溃。
RDS PostgreSQL CPU利用率高问题
通过查看 操作行数 的详细信息可以发现，数据库中存在大量的全表扫描行，这是导致CPU利用率高的主要原因。此时应该定位到导致该问题的SQL，对其进行优化。说明 单击每个监控项后的 查看各个监控项包含的指标。解决方案：通过自治服务定位...
Query级别诊断结果
找到扫描数据量较大的表扫描算子后，您可以考虑如下方式进行调优：在查询中增加AND过滤条件。调整已有的过滤条件，减少过滤后的数据量。检查是否存在没有下推的过滤条件。若存在，请参见 过滤条件没有下推 中的建议进行优化。
Dataphin同步任务速度低
5.如果输入是数据库类，非网络问题的话，一般是数据库查询性能问题：大表查询性能低，全表扫描，或者数据库负载陡增导致查询卡住等，如果该表有整形类型的主键或索引，则管道配置要添加切分键，且过滤条件使用的字段最好也是索引，左值不能...
概述
使用Spark计算引擎访问...由于col2不是数据表的主键，表格存储会再次进行全表扫描找到col2的值为'a'的两行数据，然后将两次中间结果的数据进行union。此时也可以通过构建一个主键为col1、col2的索引表支持该查询，但此种方式的灵活性较低。
管理数据集
说明 仅基于MaxCompute数据源创建的数据集，才支持开启全表扫描功能。单击 确定。删除数据集 在 数据集 管理页面，按照下图指引删除数据集。如果您通过该数据集创建过 仪表板、自助取数、电子表格、数据大屏、即席分析 或 数据填报，删除时...
- 产品推荐
- 这些文档可能帮助您