MySQL生产库内存飙升排查:利用performance_schema定位异常SQL

一只小鹿
一只小鹿
发布时间:2026-10-16| 6人浏览过
原创

在生产环境中遇到MySQL实例内存使用率持续偏高的告警时,可以通过配置performance_schema来深入监控数据库内部的资源消耗。本文以阿里云RDS环境为例,演示如何开启内存监控开关、分析按事件(Event)和连接线程(Thread)划分的内存分配详情,进而关联审计日志锁定引发问题的具体SQL,从而解决数据库资源异常占用的问题。

开启内存监控功能

由于多数生产环境托管于云数据库(如阿里云RDS),调整全局参数的流程通常较为便捷。performance_schema默认状态可能处于关闭或低精度模式。为了获取精细的内存指标,需要将其设置为开启状态。注意:修改该参数后数据库通常会自动重启,建议安排在业务低峰期操作。

第1步:激活内存类监控项

  • 目的:启用所有以memory开头的性能事件采集器。
  • 入口:登录MySQL命令行客户端。
  • 动作:执行以下语句更新监控表:
update performance_schema.setup_instruments set enabled = 'yes' where name like 'memory%';

第2步:验证监控生效范围

  • 目的:确认关键的内存指标采集器已正确加载。
  • 动作:运行验证SQL:
select * from performance_schema.setup_instruments where name like 'memory%innodb%' limit 5;

关键提示:该命令为“在线打开”操作,仅对开启时间点之后分配的内存对象进行计数。若需完整还原历史内存占用峰值,建议在业务高峰期前后都保持监控开启。当前状态下请耐心等待一段时间,收集足够的数据样本后再执行后续查询。

定位高内存消耗的来源

通过分别查看全局事件维度和单条连接维度的内存消耗情况,可以快速收敛可疑目标。

统计各类事件的内存占用

  • 目的:找出消耗内存最多的操作类型。
  • 入口:查询performance_schema.memory_summary_global_by_event_name表。
  • 重要参数:关注SUM_NUMBER_OF_BYTES_ALLOC(累计分配字节数)字段。
select event_name,
       SUM_NUMBER_OF_BYTES_ALLOC
from performance_schema.memory_summary_global_by_event_name
order by SUM_NUMBER_OF_BYTES_ALLOC desc
LIMIT 10;
+---------------------------------------+-------------------------------------+
| event_name                            | SUM_NUMBER_OF_BYTES_ALLOC           |
+---------------------------------------+-------------------------------------+
| memory/sql/Filesort_buffer::sort_keys | 763523904056                        |
| memory/memory/HP_PTRS                 | 118017336096                        |
| memory/sql/thd::main_mem_root         | 114026214600                        |
| memory/mysys/IO_CACHE                 | 59723548888                         |
| memory/sql/QUICK_RANGE_SELECT::alloc  | 14381459680                         |
+---------------------------------------+-------------------------------------+

从输出结果可以清晰看到,占据绝对优势的是memory/sql/Filesort_buffer::sort_keys。该名称明确指向了由文件排序产生的缓冲区溢出,说明大量查询因为内存排序不足而被迫使用临时文件甚至产生巨大的内部开销。

细化至单个连接线程的定位

  • 目的:找到究竟是哪些特定的会话(Session/Thread)在进行大规模的资源浪费。
  • 入口:查询performance_schema.memory_summary_by_thread_by_event_name表。
select thread_id,
       event_name,
       SUM_NUMBER_OF_BYTES_ALLOC
from performance_schema.memory_summary_by_thread_by_event_name
order by SUM_NUMBER_OF_BYTES_ALLOC desc
limit 10;

观察该查询结果,前10名消耗极大的线程全部与Filesort_buffer相关。这表明多个活跃连接正在并行进行耗时的排序操作,是引发整体内存水位攀升的直接原因。

锁定并修复异常SQL

根据上一步获取到的异常thread_id,前往对应环境的数据库审计日志中检索这些线程所执行的语句。

在检索过程中,发现大量结构相似的SQL请求。尽管单次响应时间仅为几十到几百毫秒,但在高并发场景下,其累积的系统开销极大。经过与开发团队核实,这类SQL存在三个致命缺陷:
1. 未实施分页策略,每次查询都会拉取成千上万行数据;
2. 对海量数据集进行末尾排序(Sort);
3. 参与排序的字段缺乏有效的索引支持,导致必须触发全表扫描并在内存中进行排序操作。

到此,因缺少分页与索引优化引发的高并发内存异常排雷工作完成。

以上就是利用performance_schema监控排查MySQL生产库内存异常增高的详细内容,更多关于MySQL性能调优及排查的资料请关注本站其它相关文章!

免责声明:本文内容仅供参考,不代表本站观点。转载或引用请注明出处。

Python 相关产品和应用

全部下载
Selenium

Selenium

4.51.0 · Windows

用于浏览器自动化和 Web 测试的 Python 工具。

scikit-learn

scikit-learn

1.9.1 · Windows

常用 Python 机器学习算法与模型评估工具库。

Black

Black

26.10.1 · Windows

强调一致性的 Python 自动代码格式化工具。

Ruff

Ruff

0.17.1 · macOS

由 Rust 编写的高速 Python 代码检查和格式化工具。

pytest

pytest

9.1.1 · Windows

简洁而强大的 Python 自动化测试框架。

FastAPI

FastAPI

0.146.0 · Windows

高性能 Python API 框架,支持类型提示和自动接口文档。

Flask

Flask

3.1.3 · Windows

轻量灵活的 Python Web 应用框架。

Django

Django

6.1.2 · Windows

成熟的 Python Web 框架,适合构建内容站点和业务系统。

Spyder

Spyder

6.1.7 · Windows

面向科学计算与数据分析的 Python 集成开发环境。

SciPy

SciPy

1.18.1 · Windows

面向科学、工程和技术计算的 Python 算法库。