0

0

Python并发常见坑_死锁与竞态条件

冷炫風刃

冷炫風刃

发布时间:2026-03-08 19:43:06

|

181人浏览过

|

来源于php中文网

原创

死锁和竞态条件是python并发中最易出问题的两个点:竞态条件源于非原子操作(如counter += 1)被中断,需用lock或线程安全结构防护;死锁由循环等待锁引发,须统一加锁顺序、设超时并避免嵌套锁;异步环境下需用asyncio.lock而非threading.lock,且i/o密集用asyncio或threading,cpu密集必须用multiprocessing。

python并发常见坑_死锁与竞态条件

Python并发中,死锁和竞态条件是最容易出问题的两个点。它们不总在测试时暴露,却常在线上突然导致数据错乱或服务卡死。关键不是“会不会用线程”,而是“共享资源怎么管”。

竞态条件:看似简单的 += 其实很危险

多个线程同时执行 counter += 1,结果常常小于预期值——这不是运气差,是操作本身非原子:读取、计算、写回三步之间可能被切换打断。

  • 别依赖 GIL 保护:GIL 只保证字节码级互斥,不能覆盖多步逻辑
  • 简单变量用 threading.Lock 包裹临界区,推荐 with lock: 写法,自动释放
  • 优先选线程安全结构:比如用 queue.Queue 传数据,而不是直接改全局字典;用 threading.local() 给每个线程配独立副本
  • 避免跨线程共享可变对象(如 list、dict),尤其不要让一个线程 append,另一个线程 pop

死锁:两个线程互相等对方放手

典型场景是转账:线程A锁账户X再等Y,线程B锁账户Y再等X。一旦发生,程序就停在那里,不报错也不继续。

Stable Diffusion 2.1 Demo
Stable Diffusion 2.1 Demo

最新体验版 Stable Diffusion 2.1

下载
  • 统一加锁顺序:所有线程按相同规则获取锁,比如总是先锁 ID 小的账户
  • 避免嵌套锁:一个函数里不要持有一个锁再去申请另一个;真需要,用 threading.RLock(可重入),但不解决根本问题
  • 设超时:lock.acquire(timeout=2),失败就退避或重试,别干等
  • 用工具辅助检测:开发阶段可启用 threading.settrace 或静态分析工具检查锁路径

异步环境也有对应问题

asyncio 里没有线程,但协程共享变量一样会乱。比如多个协程同时更新缓存计数器,结果对不上。

立即学习Python免费学习笔记(深入)”;

  • 别在 async 函数里用 threading.Lock:它会阻塞事件循环,整个程序卡住
  • 改用 asyncio.Lock,配合 async with lock:,挂起协程而非阻塞线程
  • 文件写、数据库初始化、单例加载这类操作,只要涉及共享状态,都得加异步锁
  • 注意 awaitable 资源:比如用 aiomysql 替代 mysql-connector,否则同步调用照样拖垮 event loop

选对模型比修 bug 更重要

很多“并发问题”其实源于模型误用。GIL 不是 bug,是设计约束;用错地方才成坑。

  • CPU 密集任务(如图像处理、数值计算):放弃 threading,改用 multiprocessingconcurrent.futures.ProcessPoolExecutor
  • I/O 密集任务(如 HTTP 请求、日志写入):threading 有效,因为等待时 GIL 自动释放;高并发场景可切 asyncio
  • 混合任务(部分计算 + 部分请求):用 ProcessPoolExecutor 做计算,ThreadPoolExecutor 或 asyncio 做 I/O,明确分工
  • 别在协程里调 time.sleep()requests.get()open() 这类同步函数,必须用 asyncio.sleep()aiohttpaiosqlite 等异步替代,或包进 loop.run_in_executor

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

686

2023.06.20

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

493

2023.06.21

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

287

2023.07.18

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

519

2023.07.19

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

267

2023.07.25

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

392

2023.08.08

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

542

2023.08.11

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

666

2023.08.14

JavaScript浏览器渲染机制与前端性能优化实践
JavaScript浏览器渲染机制与前端性能优化实践

本专题围绕 JavaScript 在浏览器中的执行与渲染机制展开,系统讲解 DOM 构建、CSSOM 解析、重排与重绘原理,以及关键渲染路径优化方法。内容涵盖事件循环机制、异步任务调度、资源加载优化、代码拆分与懒加载等性能优化策略。通过真实前端项目案例,帮助开发者理解浏览器底层工作原理,并掌握提升网页加载速度与交互体验的实用技巧。

59

2026.03.06

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.5万人学习

Django 教程
Django 教程

共28课时 | 4.9万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号