0

0

SQL数据库SQL执行统计_性能画像构建方法

舞夢輝影

舞夢輝影

发布时间:2026-01-09 17:28:41

|

460人浏览过

|

来源于php中文网

原创

SQL执行统计与性能画像的核心是将执行日志转化为可定位、可对比、可归因的结构化视图,关键在于精准选字段、合理聚合维度、快速识别异常;必存5类基础字段(SQL指纹、耗时、扫描行数、返回行数、执行次数),需统一指纹生成规则;须按business_tag+SQL指纹双层聚合,并建立动态基线与执行计划快照机制。

sql数据库sql执行统计_性能画像构建方法

SQL执行统计与性能画像的核心,是把零散的执行日志转化为可定位、可对比、可归因的结构化视图。关键不在于采集多全,而在于字段选得准、聚合维度对、异常识别快。

抓关键指标:不是所有字段都值得存

高频慢SQL诊断最依赖5类基础字段:SQL指纹(去参数化后的标准化文本)、执行耗时(duration_ms)、扫描行数(rows_examined)、返回行数(rows_sent)、执行次数(count)。其中SQL指纹必须统一生成规则(如用正则替换字面量为?,忽略空格和换行),否则相同逻辑的SQL会被拆成多个“假热点”。错误示例:直接记录原始SQL,导致SELECT * FROM user WHERE id=1001SELECT * FROM user WHERE id=1002被当作两条独立语句。

  • 必存字段:指纹、平均/最大耗时、P95耗时、总执行次数、总扫描行数、错误码频次
  • 建议存字段:执行计划哈希(用于识别执行计划突变)、数据库名、用户账号、客户端IP(用于归属分析)
  • 可丢弃字段:完整SQL原文(除非需审计)、线程ID、时间戳精确到毫秒(聚合后只需分钟级粒度)

按业务维度聚合:让数据能对得上人

单纯按SQL指纹聚合只能看到“哪条SQL慢”,但无法回答“哪个服务/哪个功能在拖慢系统”。需要在采集端或预处理阶段注入业务标签:

  • 在应用层打标:MyBatis拦截器或Spring AOP中提取Mapper接口名+方法名,作为business_tag
  • 在代理层打标:ShardingSphere或ProxySQL配置SQL注释解析规则,识别/* service=order, method=create */这类标记
  • 聚合时保留至少两层:先按business_tag + SQL指纹分组,再向上卷到business_tag汇总,便于快速下钻

动态基线识别:避免用固定阈值误杀

把“耗时>1s”设为慢SQL阈值会漏掉高频轻量查询的累积影响,也会误报低峰期的合理波动。应基于历史行为自动计算动态基线:

  • 对每个SQL指纹,每小时计算其过去7天同期的P90耗时,作为当前小时基线
  • 当实时P95耗时 > 基线 × 2 且持续3个采样周期,触发“性能劣化”标记
  • 对扫描行数突增(如比基线上升5倍),单独告警——这往往意味着索引失效或条件未走索引

执行计划快照留存:查问题时少一次复现

很多性能问题只在特定数据分布或并发下出现,等收到告警再去explain,现场已不可复现。应在检测到异常SQL时自动捕获执行计划:

  • 配置策略:对P95耗时Top 10% 或 扫描行数Top 5% 的SQL,自动执行EXPLAIN FORMAT=JSON并存入plan表
  • plan表字段至少包含:SQL指纹、采集时间、query_plan_json、used_index、key_len、rows_estimated
  • 前端展示时,将当前计划与最近一次正常计划做diff(比如type从ref变成ALL,或key从idx_user_id变成NULL)

不复杂但容易忽略。重点是让每条统计记录背后都能快速连到业务动作、执行逻辑和数据特征。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

676

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

320

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

346

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

1094

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

357

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

675

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

571

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

414

2024.04.29

c++主流开发框架汇总
c++主流开发框架汇总

本专题整合了c++开发框架推荐,阅读专题下面的文章了解更多详细内容。

24

2026.01.09

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
WEB前端教程【HTML5+CSS3+JS】
WEB前端教程【HTML5+CSS3+JS】

共101课时 | 8.2万人学习

JS进阶与BootStrap学习
JS进阶与BootStrap学习

共39课时 | 3.1万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号