0

0

mysql执行SQL语句时的缓存机制与内存使用

P粉602998670

P粉602998670

发布时间:2026-01-28 10:41:09

|

112人浏览过

|

来源于php中文网

原创

MySQL 8.0+ 已彻底移除查询缓存(query_cache_type等参数),因其高并发下锁争用严重、命中率低;InnoDB Buffer Pool 成为数据页缓存主力,建议设为物理内存的50%~75%。

mysql执行sql语句时的缓存机制与内存使用

MySQL 查询缓存(Query Cache)已彻底移除,别再配置 query_cache_type

MySQL 8.0 起,query_cache_typequery_cache_size 等所有查询缓存相关变量已被删除。如果你在 8.0+ 版本中看到 Unknown system variable 'query_cache_type' 错误,不是配置错了,是它根本不存在了。

官方移除原因很直接:在高并发写入场景下,查询缓存的锁争用和失效开销远大于收益;且它只对完全相同的 SQL 文本(包括空格、大小写、连接顺序)命中,实际业务中命中率极低。

  • 5.7 是最后一个支持查询缓存的大版本,但默认已是 OFF
  • 即使开启,只要表有任意写操作(INSERT/UPDATE/DELETE),该表所有缓存条目立即失效
  • SELECT SQL_NO_CACHE ... 这类提示在 8.0+ 中虽不报错,但完全被忽略

InnoDB 缓冲池(Buffer Pool)才是真正的“SQL 执行内存主力”

执行 SELECT 时,数据页从磁盘加载到内存的过程由 InnoDB Buffer Pool 完成;执行 UPDATEINSERT 时,修改也先发生在 Buffer Pool 中,再异步刷回磁盘。它的大小直接决定多数 SQL 的响应速度和内存占用

关键点:

  • Buffer Pool 不缓存 SQL 文本或执行计划,只缓存数据页(.ibd 文件中的 16KB 页面)和索引页
  • 默认大小通常仅 128MB,生产环境务必调大——建议设为物理内存的 50%~75%,但不超过 innodb_buffer_pool_size 上限(如 64GB 机器可设 40G)
  • 修改后需重启 MySQL 生效(8.0.22+ 支持在线调整,但仍有碎片限制)
  • 可通过 SHOW ENGINE INNODB STATUS\G 查看 Buffer pool hit rate,持续低于 95% 就该扩容了

执行计划生成与临时表内存:sort_buffer_sizetmp_table_size 的真实作用

当 SQL 需要排序(ORDER BY)、分组(GROUP BY)或创建内部临时表时,MySQL 会分配线程级内存,这些参数控制单次操作能用多少内存,超限就落磁盘,性能断崖下跌。

网奇Cwms企业网站程序1.0 1
网奇Cwms企业网站程序1.0 1

网奇CWMS企业网站管理系统 Company Website Manage System采用微软 ASP.NET2.0(C#) 设计,使用分层设计模式,页面高速缓存,是迄今为止国内最先进的.NET语言企业网站管理系统。整套系统的设计构造,完全考虑大中小企业类网站的功能要求,网站的后台功能强大,管理简捷,支持模板机制。使用国际编码,通过xml配置语言,一套系统可同时支持任意多语言。全站可生成各类模拟

下载

常见误区:

  • sort_buffer_size 不是“排序总内存”,而是每个需要排序的线程独占一块(非全局共享),设太大反而浪费;一般 256KB~4MB 足够,超大结果集排序应靠索引覆盖而非调大该值
  • tmp_table_sizemax_heap_table_size 必须设为相同值,否则以较小者为准;超过该值的内存临时表会自动转成磁盘 MyISAM 表(Created_tmp_disk_tables 计数器上升)
  • 查看是否频繁落盘:SHOW GLOBAL STATUS LIKE 'Created_tmp%';,若 Created_tmp_disk_tables / Created_tmp_tables > 10%,说明临时表内存不足

执行过程中真正消耗内存的几个典型场景

不是所有 SQL 都吃内存,但以下情况会显著拉升单条语句的内存峰值:

  • SELECT * FROM huge_table ORDER BY unindexed_column:触发全表扫描 + 内存排序,若结果集超 sort_buffer_size,降级为归并排序并大量使用磁盘
  • JOIN 多张大表且无有效索引:驱动表结果集在内存中构建哈希表(hash_join_buffer_size 控制),可能暴涨至 GB 级
  • GROUP BY 配合 WITH ROLLUP 或多层嵌套聚合:内部临时表膨胀快,极易突破 tmp_table_size
  • 使用窗口函数(ROW_NUMBER()RANK())处理百万行:MySQL 8.0+ 仍需将分区数据暂存内存,无索引时内存消耗陡增

查当前连接内存使用:SELECT * FROM performance_schema.memory_summary_by_thread_by_event_name WHERE EVENT_NAME LIKE 'memory/sql/%' ORDER BY SUM_ALLOCATED DESC LIMIT 10; —— 注意这是按线程维度统计,不是全局。

Buffer Pool 管理的是“热数据页”,而 sort/tmp 相关 buffer 管理的是“计算过程”,两者生命周期、作用域、调优逻辑完全不同。混淆它们,就会一边狂调 innodb_buffer_pool_size 一边看着 Created_tmp_disk_tables 暴涨。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

707

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

327

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

350

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

1221

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

360

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

819

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

581

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

423

2024.04.29

Python 自然语言处理(NLP)基础与实战
Python 自然语言处理(NLP)基础与实战

本专题系统讲解 Python 在自然语言处理(NLP)领域的基础方法与实战应用,涵盖文本预处理(分词、去停用词)、词性标注、命名实体识别、关键词提取、情感分析,以及常用 NLP 库(NLTK、spaCy)的核心用法。通过真实文本案例,帮助学习者掌握 使用 Python 进行文本分析与语言数据处理的完整流程,适用于内容分析、舆情监测与智能文本应用场景。

22

2026.01.27

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 1.9万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 812人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号