0

0

postgresqlworkmem影响哪些操作_postgresql排序内存机制

尊渡假赌尊渡假赌尊渡假赌

尊渡假赌尊渡假赌尊渡假赌

发布时间:2025-11-27 20:22:02

|

280人浏览过

|

来源于php中文网

原创

work_mem决定PostgreSQL排序、哈希等操作的内存上限,影响ORDER BY、DISTINCT、GROUP BY、JOIN等;若超出则写入磁盘降低性能,建议根据内存和并发合理设置为64MB~256MB。

postgresqlworkmem影响哪些操作_postgresql排序内存机制

PostgreSQL 中的 work_mem 参数直接影响排序、哈希表构建和部分查询执行过程中的内存使用。它决定了每个操作(如排序、哈希连接)在开始写入磁盘前可以使用的最大内存量。合理设置 work_mem 对查询性能至关重要,尤其是在处理大数据集时。

work_mem 影响的主要操作

以下操作会受到 work_mem 的限制:

  • ORDER BY:查询中包含排序操作时,PostgreSQL 会在内存中进行排序。如果数据量超过 work_mem 限制,就会生成临时文件写入磁盘(称为“外部排序”),显著降低性能。
  • DISTINCT:去重操作通常使用排序或哈希来实现,这两种方式都会受 work_mem 控制。
  • GROUP BY:当使用哈希聚合(HashAggregate)时,哈希表的构建受限于 work_mem。若内存不足,会退化为磁盘上的哈希或改用排序聚合。
  • JOIN 操作(特别是 Hash Join):Hash Join 在内存中构建哈希表,其大小不能超过 work_mem。超出后会分批处理,增加 I/O 开销。
  • Merge Join 的中间排序:如果 Merge Join 需要先对数据排序,该排序阶段也受 work_mem 限制。
  • Materialize 节点:某些子查询或 CTE 被物化时,可能涉及内存缓存或排序,也会使用 work_mem。

PostgreSQL 排序内存机制详解

PostgreSQL 使用一种称为“内外混合排序”的机制来处理大规模排序任务:

  • 当执行 ORDER BY 或其他需要排序的操作时,系统首先尝试在内存中完成排序,分配最多不超过 work_mem 的内存空间。
  • 如果待排序的数据量小,整个排序可以在内存中完成,效率最高。
  • 若数据量超过 work_mem,PostgreSQL 会将输入数据切分为多个小于 work_mem 的块,每块单独在内存中排序后写入临时文件。
  • 最后,系统执行一个多路归并(merge pass),读取所有已排序的临时文件,合并成最终有序结果。这个过程涉及大量磁盘 I/O,速度远慢于纯内存排序。
  • 对于非常大的数据集,可能需要多轮归并,进一步影响性能。

如何查看是否使用了磁盘排序

可以通过 EXPLAIN ANALYZE 命令观察执行计划中是否有外部排序发生:

Runway
Runway

Runway是一个AI创意工具平台,它提供了一系列强大的功能,旨在帮助用户在视觉内容创作、设计和开发过程中提高效率和创新能力。

下载
Sort Method: external sort Disk: 4096kB

上面的信息表示排序使用了约 4MB 的磁盘空间,说明 work_mem 不足。理想情况下应看到:

Sort Method: quicksort Memory: 1024kB

这表示完全在内存中完成排序。

work_mem 设置建议

  • 默认值通常为 4MB,对于现代服务器来说偏小,容易导致频繁磁盘排序。
  • 可适当调高至 64MB~256MB,具体取决于系统内存总量和并发查询数。
  • 注意:每个排序或哈希操作都可能独立使用 up to work_mem 内存,高并发下总内存消耗 = 并发数 × 每个查询使用的 work_mem 数量。
  • 避免设置过大导致内存溢出或 swap,建议结合监控工具观察实际使用情况。
  • 可在会话级别临时调整:
    SET work_mem = '64MB';

基本上就这些。理解 work_mem 和排序机制有助于优化慢查询,减少磁盘 I/O,提升数据库响应速度。

相关专题

更多
sort排序函数用法
sort排序函数用法

sort排序函数的用法:1、对列表进行排序,默认情况下,sort函数按升序排序,因此最终输出的结果是按从小到大的顺序排列的;2、对元组进行排序,默认情况下,sort函数按元素的大小进行排序,因此最终输出的结果是按从小到大的顺序排列的;3、对字典进行排序,由于字典是无序的,因此排序后的结果仍然是原来的字典,使用一个lambda表达式作为key参数的值,用于指定排序的依据。

386

2023.09.04

postgresql常用命令
postgresql常用命令

postgresql常用命令psql、createdb、dropdb、createuser、dropuser、l、c、dt、d table_name、du、i file_name、e和q等。本专题为大家提供postgresql相关的文章、下载、课程内容,供大家免费下载体验。

158

2023.10.10

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

972

2023.11.02

postgresql常用命令有哪些
postgresql常用命令有哪些

postgresql常用命令psql、createdb、dropdb、createuser、dropuser、l、c、dt、d table_name、du、i file_name、e和q等。更详细的postgresql常用命令,大家可以访问下面的文章。

196

2023.11.16

postgresql常用命令介绍
postgresql常用命令介绍

postgresql常用命令有l、d、d5、di、ds、dv、df、dn、db、dg、dp、c、pset、show search_path、ALTER TABLE、INSERT INTO、UPDATE、DELETE FROM、SELECT等。想了解更多postgresql的相关内容,可以阅读本专题下面的文章。

268

2023.11.20

数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

350

2023.06.29

如何删除数据库
如何删除数据库

删除数据库是指在MySQL中完全移除一个数据库及其所包含的所有数据和结构,作用包括:1、释放存储空间;2、确保数据的安全性;3、提高数据库的整体性能,加速查询和操作的执行速度。尽管删除数据库具有一些好处,但在执行任何删除操作之前,务必谨慎操作,并备份重要的数据。删除数据库将永久性地删除所有相关数据和结构,无法回滚。

2074

2023.08.14

vb怎么连接数据库
vb怎么连接数据库

在VB中,连接数据库通常使用ADO(ActiveX 数据对象)或 DAO(Data Access Objects)这两个技术来实现:1、引入ADO库;2、创建ADO连接对象;3、配置连接字符串;4、打开连接;5、执行SQL语句;6、处理查询结果;7、关闭连接即可。

347

2023.08.31

PHP WebSocket 实时通信开发
PHP WebSocket 实时通信开发

本专题系统讲解 PHP 在实时通信与长连接场景中的应用实践,涵盖 WebSocket 协议原理、服务端连接管理、消息推送机制、心跳检测、断线重连以及与前端的实时交互实现。通过聊天系统、实时通知等案例,帮助开发者掌握 使用 PHP 构建实时通信与推送服务的完整开发流程,适用于即时消息与高互动性应用场景。

11

2026.01.19

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
CSS3 教程
CSS3 教程

共18课时 | 4.7万人学习

PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.4万人学习

Django 教程
Django 教程

共28课时 | 3.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号