0

0

Python GIL 对多线程的影响

舞姬之光

舞姬之光

发布时间:2026-01-27 19:27:11

|

373人浏览过

|

来源于php中文网

原创

Python多线程跑CPU密集任务几乎不提速,因GIL强制同一时刻仅一个线程执行字节码,导致多线程实际串行执行,且有线程切换与GIL争抢开销。

python gil 对多线程的影响

Python 多线程跑 CPU 密集任务为什么几乎不提速

因为 GIL(Global Interpreter Lock)强制同一时刻只有一个线程执行 Python 字节码。即使你开了 8 个 threading.Thread,它们在 CPU 密集场景下仍会排队等待 GIL,实际是串行执行。

典型表现:用多线程计算斐波那契、矩阵乘法或循环累加,耗时几乎等于单线程——甚至更慢(线程切换开销+GIL争抢)。

  • 纯 Python 循环、数学运算、字符串处理等都受 GIL 限制
  • time.sleep()socket.recv()file.read() 等 I/O 操作会主动释放 GIL,此时其他线程可运行
  • C 扩展(如 numpy 的大部分数组运算)通常在内部释放 GIL,所以多线程调用 np.dot 可能真正并行

什么时候该用 threading 而不是 multiprocessing

当任务本质是 I/O 密集型,且需要共享内存状态(比如共用一个字典缓存、一个数据库连接池),threading 更轻量、通信无序列化成本。

常见适用场景:

立即学习Python免费学习笔记(深入)”;

  • 并发发起 HTTP 请求(requests.get 期间 GIL 已释放)
  • 监听多个 socket 连接(selectpoll 阻塞时让出 GIL)
  • 定时轮询文件变化或队列消息(queue.Queue 是线程安全的)

注意:threading 下全局变量可直接读写,但需用 threading.Lock 保护临界区;而 multiprocessing 中进程间默认不共享内存,改用 Managershared_memory 代价更高。

如何验证当前线程是否持有 GIL

没法直接“读取”GIL 状态,但可通过行为间接判断:在纯计算函数中插入 time.sleep(0),若性能显著下降,说明原代码原本在持续占用 GIL;反之,如果加了 sleep 后总耗时不变,可能本就频繁让出 GIL(比如调用了带释放逻辑的 C 函数)。

触发式加载精美特效企业网站源码1.0.0
触发式加载精美特效企业网站源码1.0.0

触发式加载精美特效企业网站源码使用jquery实现了很多精美的触发式加载特效,网站首页在随着访客的滚动条滚动过程中会出现很多触发式加载的特殊效果,让这个网站的风格瞬间显得非常的高大上,让你的企业品牌在访客心中留下更深的影响。当然,我们在使用jquery特效的同时也要注意程序对搜索引擎的友好型,所以这一点儿作者也有考虑到,已经尽可能的对js和css脚本进行精简和优化,尽可能的加快网站加载速度,同时也

下载

更可靠的方式是用系统工具观察 CPU 利用率:

  • 单线程 CPU 密集任务:1 个核心跑满(100%)
  • 多线程 CPU 密集任务:仍是 1 个核心跑满,其余核心空闲
  • 多线程 I/O 密集任务:多个核心活跃(因线程在等待 I/O 时被调度到不同核)

Linux 下可用 htop 查看 per-thread CPU%,macOS 可用 Activity Monitor 切换到 “Threads” 视图。

绕不开 GIL 时的实用替代方案

真要并行 CPU 工作,multiprocessing 是最直接的选择,但它有启动开销和数据序列化成本。对小任务不划算,对大计算才值得。

其他可行路径:

  • concurrent.futures.ProcessPoolExecutor 替代 ThreadPoolExecutor,接口几乎一致,只需改一行初始化代码
  • 把计算密集部分封装成独立脚本,用 subprocess.run 启动,避免解释器级耦合
  • 换语言:Cython 编译关键循环并显式释放 GIL(用 with nogil:),或用 Rust 写扩展(通过 pyo3
  • 用异步 I/O(asyncio)处理高并发网络请求——它不解决 CPU 并行,但比多线程更省内存、更高吞吐

GIL 不是 bug,是 CPython 实现内存管理(引用计数)的取舍。理解它何时生效、何时失效,比试图“干掉它”更重要。很多所谓“GIL 问题”,其实是选错了并发模型。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
C++系统编程内存管理_C++系统编程怎么与Rust竞争内存安全
C++系统编程内存管理_C++系统编程怎么与Rust竞争内存安全

C++系统编程中的内存管理是指 对程序运行时内存的申请、使用和释放进行精细控制的机制,涵盖了栈、堆、静态区等不同区域,开发者需要通过new/delete、智能指针或内存池等方式管理动态内存,以避免内存泄漏、野指针等问题,确保程序高效稳定运行。它核心在于开发者对低层内存有完全控制权,带来灵活性,但也伴随高责任,是C++性能优化的关键。

10

2025.12.22

全局变量怎么定义
全局变量怎么定义

本专题整合了全局变量相关内容,阅读专题下面的文章了解更多详细内容。

78

2025.09.18

python 全局变量
python 全局变量

本专题整合了python中全局变量定义相关教程,阅读专题下面的文章了解更多详细内容。

96

2025.09.18

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

298

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

212

2023.09.04

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

1500

2023.10.24

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

623

2023.11.24

java读取文件转成字符串的方法
java读取文件转成字符串的方法

Java8引入了新的文件I/O API,使用java.nio.file.Files类读取文件内容更加方便。对于较旧版本的Java,可以使用java.io.FileReader和java.io.BufferedReader来读取文件。在这些方法中,你需要将文件路径替换为你的实际文件路径,并且可能需要处理可能的IOException异常。想了解更多java的相关内容,可以阅读本专题下面的文章。

613

2024.03.22

Python 自然语言处理(NLP)基础与实战
Python 自然语言处理(NLP)基础与实战

本专题系统讲解 Python 在自然语言处理(NLP)领域的基础方法与实战应用,涵盖文本预处理(分词、去停用词)、词性标注、命名实体识别、关键词提取、情感分析,以及常用 NLP 库(NLTK、spaCy)的核心用法。通过真实文本案例,帮助学习者掌握 使用 Python 进行文本分析与语言数据处理的完整流程,适用于内容分析、舆情监测与智能文本应用场景。

10

2026.01.27

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.9万人学习

Git 教程
Git 教程

共21课时 | 3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号