0

0

Python 排序与内存占用的关系

冰川箭仙

冰川箭仙

发布时间:2026-02-23 19:14:03

|

591人浏览过

|

来源于php中文网

原创

sorted() 新建列表致内存翻倍,list.sort() 原地排序几乎零增量;不可变类型只能用 sorted();key 函数需避免耗时操作,宜预处理或用 itemgetter;大数据应选 heapq 或外部排序。

python 排序与内存占用的关系

sorted() 和 list.sort() 的内存差异很真实

Python 排序操作不是“免费的”,sorted() 会新建列表,list.sort() 是原地排序——这直接决定你程序吃不吃得消。尤其处理几十万行日志、上百万条记录时,差的不是几毫秒,是几百MB内存。

  • sorted() 返回新列表,原列表不变,内存占用 ≈ 原数据 × 2(临时副本 + 结果)
  • list.sort() 不返回值(返回 None),只改原列表,内存增量几乎为 0
  • 如果后续不再需要原始顺序,硬用 sorted() 就是主动给自己加压
  • 注意:字符串、元组等不可变类型只能用 sorted(),因为没 .sort() 方法

key 参数写错会导致隐式复制和性能暴跌

很多人以为 key=lambda x: x[1] 只是“取第二项”,但若 x 是大对象(比如含 JSON 字段的字典),每次调用 lambda 都可能触发深层拷贝或计算——特别是 key 函数里写了 json.loads()re.search() 或访问数据库字段时。

同程联盟景点门票动态程序 beta1.0
同程联盟景点门票动态程序 beta1.0

经过一段时间的开发,以及内部测试,同程网联盟景区新版程序正式发布推出,感谢广大联盟会员一直以来的支持与关注! 同程网联盟景区新版程序新功能介绍:1.统一的页面风格。页面风格将与随后推出的度假线路、酒店、机票以及融合版联盟程序风格保持一直;2.新增后台管理系统。可更加方便快捷的对网站进行个性化设置;3.动态与伪静态切换。后台操作,简单便捷;4.缓存管理。新增缓存,提高网站访问速度,后台可定期清理;5

下载
  • 避免在 key 里做耗时操作;先预处理好排序键,存成新字段或缓存列表
  • operator.itemgetter('field') 替代 lambda x: x['field'],更快且不引发意外引用
  • 如果 key 计算结果可复用(比如解析一次时间戳),提前算好并 zip 到数据中:list(zip(parsed_keys, data)),再按第一列排序

小数据用内置排序,大数据考虑 heapq 或外部排序

Python 的 Timsort 在小到中等规模(

  • 确认数据量:用 sys.getsizeof() 粗略估算总内存(注意它不计嵌套对象,需递归估算)
  • 单次排序 >500MB?别硬扛,改用 heapq.merge() 分块排序合并,或导出到 SQLite 用 ORDER BY
  • heapq.nsmallest(n, iterable) 比先 sorted() 再切片快得多,尤其当 n

自定义类排序时 __lt__ 实现不当会悄悄吃内存

给类加 __lt__ 支持排序很常见,但若里面调用了 self.to_dict()json.dumps(self),每次比较都生成新对象,排序 O(n log n) 次调用 = O(n log n) 次内存分配。

立即学习Python免费学习笔记(深入)”;

  • 只在 __lt__ 里比核心字段,比如 return self.priority
  • 避免在比较方法里做序列化、格式化、网络请求等副作用操作
  • 如果必须依赖复杂逻辑,提前把排序键存在实例属性里(如 self._sort_key = compute_key(self)),然后直接比这个属性
排序本身不慢,慢的是你没意识到每个函数调用、每次对象创建、每一份隐式副本都在堆上留下痕迹。真正卡住的往往不是算法复杂度,而是某次 sorted([huge_dict_list], key=lambda d: d['config']['timeout']) —— 那个 ['config']['timeout'] 路径查找,底层反复构造中间 dict 视图,没人告诉你它不便宜。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

446

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

544

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

322

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

81

2025.09.10

sort排序函数用法
sort排序函数用法

sort排序函数的用法:1、对列表进行排序,默认情况下,sort函数按升序排序,因此最终输出的结果是按从小到大的顺序排列的;2、对元组进行排序,默认情况下,sort函数按元素的大小进行排序,因此最终输出的结果是按从小到大的顺序排列的;3、对字典进行排序,由于字典是无序的,因此排序后的结果仍然是原来的字典,使用一个lambda表达式作为key参数的值,用于指定排序的依据。

404

2023.09.04

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

618

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

217

2023.09.04

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

1558

2023.10.24

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

1127

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.4万人学习

Django 教程
Django 教程

共28课时 | 4.5万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号