如何使用PolarDB MySQL的SQL洞察和审计功能_云原生数据库 PolarDB(PolarDB)-阿里云帮助中心

PolarDB MySQL版的SQL洞察功能已升级为SQL洞察与审计，该服务由数据库自治服务（DAS）提供。搜索（审计）功能能够全量采集SQL明细，使您能够查询并导出SQL语句及其相关信息（例如，执行SQL的数据库、用户或客户端IP等）。SQL洞察功能能够对SQL进行健康状况的诊断、性能问题的排查以及业务流量的分析，从而提升故障诊断、数据库优化与风险发现的效率。

功能介绍

数据库自治服务DAS在全量请求和安全审计的基础上，融合了搜索、SQL洞察、安全审计以及流量回放和压测等功能，帮助您更好地获取SQL语句的具体信息、排查各种性能问题、识别高危风险来源、验证集群规格是否需要扩容，有效应对业务流量高峰。

搜索功能：查询并导出SQL语句及对应的各种信息，如数据库、状态、执行时间等，详情请参见搜索（审计）。
SQL洞察功能：对SQL进行健康情况诊断、性能问题排查、业务流量分析等，详情请参见SQL洞察。
- SQL Review功能：提供全局SQL负载分析能力，辅助用户快速定位到数据库实例中的可疑SQL，并对可疑SQL进行分析，给出相应的优化建议，具体操作请参见SQL Review。
- 流量回放和压测功能：提供流量回放和压测功能，帮助您验证您的实例规格是否需要扩容，有效应对业务流量高峰，具体操作请参见流量回放和压测。
- 安全审计功能：可自动识别高危SQL、SQL注入、新增访问来源等风险，详情请参见安全审计（旧版）。
- 事务分析功能：通过事务分析功能，您可以获知指定时间段内某线程的事务类型、事务数量及事务详情，便于从事务层面了解、分析和优化数据库性能，具体操作请参见事务分析。
- 快速事务分析功能：通过快速事务分析功能，可以获知待分析SQL所在事务的开始语句和结束语句，从而获知事务的提交或回滚情况，具体操作请参见快速事务分析。

支持地域

开启DAS企业版后，才可以使用该企业版提供的SQL洞察和审计功能，不同的企业版支持的数据库和地域不同。各个企业版支持的数据库和地域请参见各个版本支持的数据库和地域。

影响

开启SQL洞察功能可以记录所有DQL、DML和DDL操作信息，这些信息是通过数据库内核输出，对系统CPU消耗极低。

注意事项

如果是RAM用户，使用搜索功能时，需要为RAM用户授予AliyunPolardbReadOnlyWithSQLLogArchiveAccess权限。如何为RAM用户授权，请参见创建和管理RAM用户。

说明

您也可以通过自定义权限策略授予RAM用户使用搜索（包含导出）功能的权限，详情请参见通过自定义权限策略授权RAM用户使用SQL洞察和审计的搜索（包含导出）功能。

费用

企业版V0

SQL洞察功能的付费方式仅支持按量付费，不支持包年包月。其相关费用归属于云原生数据库PolarDB。

价格

中国内地地域：0.008元/GB/小时。
中国香港及海外地域：0.0122元/GB/小时。

企业版V0以上版本

SQL洞察功能相关费用归属于数据库自治服务DAS。有关具体信息，请参见数据库自治服务DAS产品计费说明。

开通SQL洞察和审计

登录PolarDB控制台，选择集群所在地域，在集群列表中单击目标集群ID进入详情页。
在左侧导航栏中，选择日志与审计 > SQL洞察。
单击开启SQL洞察。
说明
如果您当前的阿里云账号未开通DAS企业版，请按照界面提示，开通DAS企业版。
在右侧页面中单击对应功能页签即可查看相关信息。
- 搜索（审计）：查询并导出SQL语句及对应的各种信息，如数据库、状态、执行时间等。
- SQL洞察：
  - 区间查看：选择需要查看SQL洞察结果的时间范围，您可以查看选定时间范围内所有SQL的执行耗时分布、执行耗时、执行次数。您还可以在全量请求统计区域内查看选定时间范围内所有SQL的详细信息，并可以将其导出到本地。
    说明
    最多支持导出1000条SQL日志，如果您需要获取更大时间范围或更多数量的SQL日志，可以通过搜索（审计）功能。
    开启SQL洞察后，请耐心等待半小时后，方可查看到审计日志。
  - 对比查看：选择需要对比SQL洞察结果的时间点，您可以查看所有SQL执行耗时分布、执行耗时、执行次数的对比结果。您还可以在请求对比列表区域内查看详细的对比结果。
  - 来源统计：选择需要统计SQL来源的时间范围，你可以查看选定时间范围内所有SQL的来源信息。
  - SQL Review：对选定区间与基准区间内的数据库集群进行workload分析，并且对数据库集群中运行的SQL进行深度分析，展示数据库集群的索引优化建议、SQL改写建议、TOP SQL、新增SQL、失败SQL、SQL特征分析、执行变化SQL、性能恶化SQL和TOP流量表。
  - 相关SQL识别：选择需要查看的指标，单击分析按钮，经过1～5分钟的时间，即可以定位到在选定时间范围内和相关指标变化趋势最相似的SQL及其详细信息。
  - 流量回放和压测：面对即将到来的短期业务高峰或数据库结构变更（尤其是索引变更）时，您可以通过流量回放与压测功能，确认数据库集群规格是否需要扩容，并验证在真实业务场景下的实际效果，降低上线后引发故障的风险。
  - 安全审计：自动识别高危操作、SQL注入、新增访问等风险。
  - 事务分析：基于DAS企业版 V3热存储数据，对所选定的线程和时间范围内的事务详情进行分析，然后进行统计分析，并绘制不同类型事务数量的趋势图。

参数说明

执行耗时分布：展示了选定时间范围内，所有SQL的执行耗时分布，将执行耗时分为了7个区间，每分钟计算一次，分别是：
- [0,1]ms 是指满足0ms ≤ 执行耗时 ≤ 1ms SQL执行次数占比
- （1,2]ms 是指1ms < 执行耗时 ≤ 2ms SQL执行次数占比
- （2,3]ms 是指2ms < 执行耗时 ≤ 3ms SQL执行次数占比
- （3,10]ms 是指3ms < 执行耗时 ≤ 10ms SQL执行次数占比
- （10,100]ms 是指10ms < 执行耗时 ≤ 100ms SQL执行次数占比
- （0.1,1]s 是指0.1s < 执行耗时 ≤ 1s SQL执行次数占比
- >1s 是指1s < 执行耗时 SQL执行次数占比
说明
如果一个实例的执行耗时分布越接近蓝色，代表这个实例的SQL健康情况越好，越接近橙色和红色，代表这个实例的SQL健康情况越差。
执行耗时（SQL RT）：通过执行耗时，可以方便地查看在选定的时间范围内，SQL的执行耗时。
全量请求统计：展示了选定时间范围内每一类SQL的SQL文本、耗时比例、平均执行耗时、执行趋势等信息。
说明
耗时比例＝（该类SQL执行耗时 × 执行次数）/（所有SQL执行耗时 × 总执行次数）× 100%。耗时比例越高的SQL，占用MySQL资源越多。
SQL ID：单击SQL ID，您可查看该类SQL性能趋势、SQL样本等。
SQL样本：通过SQL样本，查看该SQL是由哪个应用端发起。
说明
SQL样本的编码采用UTF-8字符集。

修改SQL日志的存储时长

警告

减少SQL洞察和审计数据存储时长后，DAS会立刻将超过存储时长的SQL审计日志清空。建议您将SQL审计日志导出并保存至本地后，再减少SQL洞察和审计数据存储时长。

登录PolarDB控制台，选择集群所在地域，在集群列表中单击目标集群ID进入详情页。
在左侧导航栏中，选择日志与审计 > SQL洞察。
单击右上角服务设置。
修改存储时长并单击确定。
说明
- 如果您开通了DAS企业版V3，您可以修改不同子功能的数据存储时长。
- SQL洞察和审计数据的存储空间是由DAS侧提供，不占用数据库集群的存储空间。

关闭SQL洞察和审计

警告

SQL洞察和审计功能关闭后，SQL审计日志会被清空。请将SQL审计日志导出并保存至本地后，再关闭SQL洞察和审计功能。当重新开启SQL洞察和审计功能时，SQL审计日志将从本次开启SQL洞察和审计的时间开始记录。

登录PolarDB控制台，选择集群所在地域，在集群列表中单击目标集群ID进入详情页。
在左侧导航栏中，选择日志与审计 > SQL洞察。
单击服务设置，关闭SQL洞察和审计。
如果您开通了DAS企业版V3，请去勾选SQL洞察和审计的所有功能。
说明
- 如果您在日志服务的CloudLens for PolarDB中开启了PolarDB MySQL版的审计日志采集功能，系统会自动开启对应PolarDB MySQL版的SQL洞察功能，因此您还需要关闭该PolarDB MySQL版的审计日志采集功能。详情请参见开启数据采集功能。
- SQL洞察功能关闭后，SQL审计日志会被清空，建议先导出SQL记录后，再关闭SQL洞察功能。如何导出SQL记录，请参见导出SQL日志记录。
单击确定。

查看审计日志大小和消费明细

登录阿里云管理控制台，在页面右上角，选择费用。
在左侧费用与成本导航栏中，选择账单 > 账单详情 。查看计费项列为sql_explorer的费用明细。
在账单详情页面，设置搜索实例ID进行搜索。查看计费项列为sql_explorer的费用明细。

迁移到新版

说明

当前仅华东1（杭州）、华东2（上海）、华北2（北京）和华南1（深圳）地域的数据库集群支持将旧版SQL洞察和审计迁移到新版。

登录PolarDB控制台，选择集群所在地域，在集群列表中单击目标集群ID进入详情页。
在左侧导航栏单击日志与审计>SQL洞察。
在弹出的SQL洞察升级为“SQL洞察和审计”对话框中，单击一键升级。

迁移不同企业版的SQL洞察和审计数据

企业版V2相对于企业版V1，变更了底层存储架构，通过冷热混合存储实现降本增效，使用成本低。而企业版V3，在冷热混合存储的基础上，按使用的功能细分计费项，计费更加灵活，使用成本更低。

当您的数据库集群支持企业版V3时，您可以将DAS企业版V1或V2的数据迁移至企业版V3，以获得更加优惠的费用，详情请参见DAS企业版间数据如何迁移？

常见问题

SQL洞察的费用是否可以用资源包进行抵扣？

不可以。SQL洞察功能的付费方式仅支持按量付费，不支持包年包月或使用资源包进行抵扣。

SQL洞察的全量请求统计区域中的`logout！`语句是什么？

logout！是指连接断开。logout！的耗时，是指上一次交互时间到logout！发生时间的差值，可以理解为连接空闲的时长。状态列的1158是指网络链接断开，其可能的原因是：

客户端连接超时。
服务端异常断开。
服务端连接Reset（超过interactive_timeout或wait_timeout时长）。

SQL洞察的来源统计中，为什么会出现%的访问来源？

该情况可能在您使用存储过程时出现。按如下示例可以发现这种情况：

说明

以下示例中数据库集群为PolarDB MySQL版，测试账号为test_user，测试数据库为test_db。

在PolarDB控制台创建普通权限账号及其授权的数据库，详细操作请参见创建普通权限账号。
使用测试账号通过命令行方式连接数据库集群，详细操作请参见使用命令行连接集群。

切换到测试数据库，并创建如下存储过程。

-- 切换到测试数据库
USE test_db;

-- 创建存储过程
DELIMITER $$
DROP PROCEDURE IF EXISTS `das` $$
CREATE DEFINER=`test_user`@`%` PROCEDURE `das`()
BEGIN
    SELECT * FROM information_schema.processlist WHERE Id = CONNECTION_ID();
END $$
DELIMITER ;

使用高权限账号连接数据库集群，详细操作请参见创建高权限账号和使用命令行连接集群。

调用存储过程。

-- 切换到测试数据库
USE test_db;

-- 调用存储过程
CALL das();

-- 调用结果
+-----------+-----------+---------+---------+---------+------+-----------+-------------------------------------------------------------------------+
| ID        | USER      | HOST    | DB      | COMMAND | TIME | STATE     | INFO                                                                    |
+-----------+-----------+---------+---------+---------+------+-----------+-------------------------------------------------------------------------+
| 269660316 | test_user | %:46182 | test_db | Query   |    0 | executing | SELECT * FROM information_schema.processlist WHERE Id = CONNECTION_ID() |
+-----------+-----------+---------+---------+---------+------+-----------+-------------------------------------------------------------------------+

为什么审计日志列表中展示的数据库名称和SQL语句中的不一致？

日志列表中所展示的数据库名称是从会话中获取的，而SQL语句中的数据库名称则由用户指定，取决于用户的输入或查询的设计，例如跨数据库查询、动态SQL等场景。两者之间可能存在不一致的情况。

开启SQL洞察和审计对数据库性能有影响吗？影响有多大？

有影响。但影响极小，几乎不会被感知。

具体到资源占用情况：

CPU、内存：消耗极低，几乎可以忽略。
存储空间：主要用于存储审计信息，但DAS企业版提供的SQL洞察和审计功能使用的是DAS侧提供的存储空间，不占用数据库集群的存储空间。
网络：不会对网络性能产生影响。
磁盘性能：不会对磁盘性能产生影响，因为审计数据存储在DAS侧，而非数据库集群的磁盘上。