配置跨库Spark SQL节点

以下Spark SQL语句可以实现将mysql_db在线库的交易流水表sales与oracle_db库的用户表users进行关联,并将关联后的数据按部门名称分组,统计交易笔数和金额,加工后的数据写入到mysql_db在线库中。INSERT INTO mysql_db.dept_sales SELECT ...

使用多机MPP对海量数据分析提速

判断某条SQL语句是否会通过列存索引的多机并行能力执行 当判断出某条SQL语句可以使用列存索引的并行执行能力后,您可以通过查看某条SQL语句的执行计划来查看是否会使用列存索引的多机并行能力。若执行计划中有 Exchange算子,则表示该SQL...

SQL开发编辑器

保存的SQL语句可以在 脚本 页签中查看。诊断查询结果 XIHE BSP SQL和XIHE MPP SQL支持SQL诊断。在 执行记录 中单击 诊断,可诊断查询执行计划。SQL诊断的详情,请参见 SQL诊断功能介绍。查看Spark日志 Spark SQL执行完成后,在 执行记录 中...

列存索引配置参数说明

取值范围如下:2(默认):含有窗口函数的SQL语句可以使用列存索引功能。1:含有窗口函数,且窗口函数中不指定FRAME的SQL语句可以使用列存索引功能。0:含有窗口函数的SQL语句不支持使用列存索引功能。loose_imci_max_enum_join_pairs 在...

PyMySQL 连接 OceanBase 数据库示例程序

test_sql.py 代码介绍 本文获取的 test_sql.py 文件中的代码定义了数据库操作的 SQL 语句,包括创建表、插入数据、查询数据和删除表,这些 SQL 语句可以通过 PyMySQL 连接数据库后执行,以实现相应的功能。该文件中的代码主要包括以下几个...

执行分析

在 SQL 窗口中,您可以SQL 语句进行系统评估、执行详情和执行的全链路耗时信息。本文档旨在介绍如何在 SQL 窗口中查看 SQL 语句的执行信息。执行计划 示例:查询表 employee 前,对查询 SQL 语句进行系统评估。在 SQL 窗口中,编辑 SQL ...

SQL 编辑和执行

运行当前语句 F9 运行当前选中的所有 SQL 语句或当前光标所在行的 SQL 语句可以通过快捷键 F9 或者 Ctrl+Enter(Windows)/Command+Enter(MacOS)运行当前语句。终止 终止正在运行的语句。在结果页签中,可查看执行状态和执行结果。查看...

查询与变更表结构

在SQL Console中您可以通过SQL语句或可视化的方式查询或变更表结构。前提条件 您有对应数据库的查询、修改等对应权限,详情可参见 管理访问控制权限。注意事项 变更表结构可能会对您的数据库与业务造成影响,需谨慎操作。查询表结构 以查看...

Spark-SQL命令行工具

select*from t1"#或者您也可以sql语句放入到文件中,每条sql语句使用分号`;`隔开,并使用-f参数指向sql文件,仅支持本地文件,且必须写绝对路径$./bin/spark-sql \-verbose \-name offlinesql \-f/path/to/your/sql/file#输出结果如下所...

RDS SQL Server CPU使用率高问题

SQL Hash 列的值是对SQL语句进行结构参数化之后的哈希值,用于标识在语句结构上完全相同的一类SQL语句,便于将SQL语句按照结构进行归类聚合统计,利用 SQL Hash 可以直接在系统视图 sys.dm_exec_query_stats 中基于query_hash列的值进行...

列存索引常见问题

通过 EXPLAIN 语句可以查看SQL语句的执行计划,如果执行计划中存在 IMCI Execution Plan,则说明此SQL语句使用了列存索引进行查询加速。示例如下:*1.row*IMCI Execution Plan(max_dop=8,max_query_mem=3435134976):Project|Exprs:temp_...

RDS MySQL全文检索相关问题及处理

RDS MySQL全文检索相关参数 参考如下SQL语句可以查看相关参数。查看MyISAM引擎表全文检索相关参数,SQL语句如下所示。show global variables like 'ft_%';查看InnoDB引擎表全文检索相关参数,SQL语句如下所示。show global variables ...

时间窗口SQL脚本

如果您在可视化参数配置中选中了 是否由系统添加Create Table语句 复选框,SQL脚本的中间位置可以配置任意的SQL语句,但是最后一句必须为Select语句。PAI会自动创建一个临时表,用来存储Select语句查询的结果。如果您在SQL语句中自行创建了...

SQL脚本

SQL脚本是自定义SQL组件,您可以通过SQL脚本编辑器编写SQL语句,并提交至MaxCompute执行。本文为您介绍SQL脚本的组件配置和使用场景。组件配置 Designer 仅支持通过可视化方式,配置SQL脚本组件的参数,组件参数配置如下所示。参数 描述 ...

SQL洞察

Top SQL洞察:通过SQL执行的Top SQL洞察列表,直观地展示高RT的SQL语句可以快速定位应用变慢的根因,并可以通过单击 操作 下方的 SQL防护 配置SQL防护规则。具体操作,请参见 慢SQL治理。Druid连接池统计数据:可以查看接口最大连接数、...

如何使用HINT(5.2及以下版本适用)

指定分库执行SQL 在使用 PolarDB-X 1.0 的过程中,如果遇到某个 PolarDB-X 1.0 不支持的SQL语句可以通过 PolarDB-X 1.0 提供的自定义HINT,直接将SQL下发到一个或多个分库上去执行。此外如果需要单独查询某个分库或者已知分库的某个分表...

新建存储过程

存储过程旨在完成特定功能的 SQL 语句集,经编译创建并保存在数据库中,用户可以通过指定存储过程名并指定所需参数来调用执行,利用存储过程可以加速 SQL 语句的执行。新建存储过程,即由用户创建并能够完成某一特定功能的存储过程,存储...

MySQL查询表文件大小

在MySQL5.7中,执行以下SQL语句可以查看表文件大小。SELECT file_name,concat(TOTAL_EXTENTS,'MB')as 'FileSize' FROM INFORMATION_SCHEMA.FILES order by TOTAL_EXTENTS DESC limit 20;说明:mysql.slow_log日志文件中不会展示表文件...

查看系统审计到的语句

将数据库接入数据库审计系统后,您可以通过云盾数据库审计系统,查看系统审计到的SQL语句。本文为您介绍如何查看数据库审计系统审计到的SQL语句。操作步骤 登录 云盾数据库审计管理控制台。在左侧导航栏,单击 A100实例。在 A100实例 页面...

TOP Objects

TOP Objects列表详情:若需要查看某一个具体数据库对象中每个步骤的性能消耗,可以点击左边的➕号按钮,来查看数据库对象中SQL语句级别的详细性能消耗。详细参数说明如下。表 5.TOP Objects列表详情参数说明 参数 说明 对象名 该SQL语句...

执行大事务SQL语句时出现“max_binlog_cache_size”...

一个数据变更可以提交多个SQL,即工单只审批一次,但SQL语句可以拆分为多条。如果您需要清理整个表的数据,可以考虑使用 truncate table[$Table_Name];语句。说明:[$Table_Name]为需要清理的表名。您可以根据实际情况,修改max_binlog_...

TOP SQL

自治服务提供实时TOP SQL 和历史TOP SQL 查询功能,挖掘出SQL语句级别的详细性能开销。前提条件 实例不能是RDS SQL Server 2008 R2云盘版。操作步骤 访问 RDS实例列表,在上方选择地域,然后单击目标实例ID。在左侧导航栏中,选择 自治服务...

EXPLAIN语法

语法 EXPLAIN 命令可以输出SQL 语句的查询计划,具体语法如下:EXPLAIN[(option[,.])]statement EXPLAIN[ANALYZE][VERBOSE]statement where option can be one of:ANALYZE[boolean]VERBOSE[boolean]COSTS[boolean]BUFFERS[boolean]TIMING...

一般SQL优化方法

SQL语句可以使用SQL优化,如添加索引、选择合适数据类型、避免使用 SELECT*、使用临时表暂存中间结果等方法,提高查询性能和简化数据库操作。优化能力 控制IN条件或OR条件的条目数量,过多的条目会导致RCA优化时间加长。尽量避免在...

一键同步MaxCompute数据

您也可以使用SQL语句导入MaxCompute数据,详情请参见 使用SQL导入MaxCompute的数据至Hologres。操作步骤 登录 阿里云官网。新建 一键MaxCompute数据同步 节点。进入 Hologres管理控制台。在页面上方选择目标地域。在左侧菜单栏单击 前往...

一键同步MaxCompute数据

您也可以使用SQL语句导入MaxCompute数据,详情请参见 使用SQL导入MaxCompute的数据至Hologres。操作步骤 登录 阿里云官网。新建 一键MaxCompute数据同步 节点。进入 Hologres管理控制台。鼠标悬停至顶部菜单栏左侧的 图标,选择目标地域。...

创建数据库账号

SQL语句创建方式,详情请参见 CREATE USER。控制台操作,详情请参见 创建和授权普通账号。一个集群最多可以创建256个普通账号。需要手动为普通账号授予指定数据库的权限,详情请参见 GRANT 和 数据库权限模型。普通账号不能断开其他普通...

使用Hint

pg_hint_plan插件可以用Hint来强制干预和调优SQL语句的执行计划,并注册调优后的SQL语句模板和Hint规则,后续遇到相同SQL语句模板(常数参数数值不同,其它值都相同)的SQL语句将自动生成Hint干预调优后的执行计划,从而提高执行效率。...

使用说明

其他操作 如果不再需要跟踪通过 dbms_sql.add_trace 存储过程添加的SQL语句,您可以通过 dbms_sql.delete_trace 存储过程根据具体的SQL语句来删除模板化的SQL语句,或通过 dbms_sql.delete_trace_by_sqlid 存储过程根据SQL ID来删除模板化...

使用Explain分析SQL执行计划

PolarDB MySQL版 中,列存执行计划以横向树的格式输出,与行存执行计划的输出格式有一定的区分度,您可以通过查看执行计划的方式来判断某条SQL语句是否可以使用列存索引加速功能。示例如下:执行如下命令,查看SQL语句的执行计划:explain ...

dbms_sql.delete_trace_by_sqlid

可以使用 dbms_sql.delete_trace 存储过程根据具体的SQL语句来删除不需要SQL Trace跟踪的模板化SQL语句。也可以使用 dbms_sql.delete_trace_by_sqlid 存储过程根据SQL ID来删除不需要SQL Trace跟踪的模板化SQL语句。语法 dbms_sql.delete...

COMMON TABLE EXPRESSION(CTE)

MaxCompute支持标准SQL的CTE,可以更好地提高SQL语句的可读性与执行效率。本文为您介绍CTE的功能、命令格式及使用示例。功能介绍 CTE可以被认为是在单个DML语句的执行范围内定义的临时结果集。CTE类似于派生表,它不作为对象存储,并且仅在...

COMMON TABLE EXPRESSION(CTE)

MaxCompute支持标准SQL的CTE,可以更好地提高SQL语句的可读性与执行效率。本文为您介绍CTE的功能、命令格式及使用示例。功能介绍 CTE可以被认为是在单个DML语句的执行范围内定义的临时结果集。CTE类似于派生表,它不作为对象存储,并且仅在...

指定分库执行SQL

在使用 PolarDB-X 的过程中,如果遇到某个 PolarDB-X 不支持的SQL语句可以通过 PolarDB-X 提供的 NODE HINT,直接将SQL下发到一个或多个分库上去执行。此外如果需要单独查询某个分库或者已知分库的某个分表中的数据,也可以使用 NODE ...

SQL审核

数据管理DMS 的SQL审核功能,支持对上传的SQL语句进行审核并提供优化建议,避免无索引或不规范的SQL语句,降低SQL注入风险。前提条件 数据库类型如下:RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL版、其他来源MySQL。RDS MariaDB。...

简介

背景信息 Spark Streaming SQL是基于Spark Structured Streaming开发完成的,所有语法功能和使用限制遵循Spark Structured Streaming的标准,因此可以使用SQL语句来开发流式分析作业。注意事项 EMR集群是否支持Spark Streaming SQL功能与...

Hologres管控台的监控指标

通过如下SQL语句可以分析各个数据库、内部表的存储占用大小。说明 pg_relation_size和pg_database_size的结果单位是Byte,pg_size_pretty的结果单位是KB、MB或者GB,根据数据量大小自动做转换。在PG的单位转换标准中,1GB=1024MB=1024*...

功能特性

无锁结构变更概览 开启无锁结构变更 通过无锁变更工单实现无锁结构变更 数据变更 普通数据变更 支持INSERT、UPDATE、DELETE、TRUNCATE、CREATE TABLE等SQL语句可以对数据库中的数据进行变更操作,用于数据初始化、历史数据清理、问题修复...

使用SQL语句自定义分析账单

可以在阿里云费用中心的 自助分析 页面中,执行SQL语句。具体操作,请参见 自助分析阿里云账单。账单数据的标识为 source:bill,每个云产品在每个账单周期内产生一条记录。更多信息,请参见 账单数据字段说明。实例数据的标识为 source:...

普通数据变更

数据管理DMS的普通数据变更功能支持INSERT、UPDATE、DELETE、TRUNCATE、CREATE TABLE等SQL语句可以对数据库中的数据进行变更操作,用于数据初始化、历史数据清理、问题修复、功能测试等场景。本文介绍在DMS中进行普通数据变更的方法。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 云数据库HBase版 实时计算 Flink版 云备份 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用