0

0

Python并发系统学习路线第215讲_核心原理与实战案例详解【技巧】

冰川箭仙

冰川箭仙

发布时间:2025-12-27 23:23:02

|

534人浏览过

|

来源于php中文网

原创

python并发稳定需避免隐式阻塞、上下文切换失控、资源竞争未加锁及协程混入同步i/o;asyncio.run()不可嵌套调用,因内部检查并拒绝已在运行的事件循环;应顶层调用,内部用await或create_task();跨同步异步边界宜用to_thread()(py3.9+)或run_in_executor();协程间共享状态必须用asyncio.lock且按资源独立实例化。

python并发系统学习路线第215讲_核心原理与实战案例详解【技巧】

Python 并发不是靠多开几个 threading.Thread 或塞一堆 asyncio.create_task() 就能稳的——真正卡住系统的,往往是隐式阻塞、上下文切换失控、资源竞争没加锁,或者协程里混进了同步 I/O。

为什么 asyncio.run() 不能嵌套调用

这是初学者最常撞上的硬错误。当你在已运行的事件循环里再调用 asyncio.run(),会直接抛出 RuntimeError: asyncio.run() cannot be called from a running event loop

  • 根本原因:asyncio.run() 内部会检查当前线程是否已有运行中的事件循环,有就拒绝启动
  • 常见场景:在 Flask/FastAPI 的请求处理函数中、或某个已由 asyncio.run() 启动的协程里,又写了 asyncio.run(some_coro())
  • 正确做法:顶层用 asyncio.run() 启动;内部一律用 awaitasyncio.create_task();若需从同步代码“切”进异步上下文(如线程中),改用 asyncio.get_event_loop().create_task()(注意循环存在性)或 asyncio.to_thread()(Py3.9+)

concurrent.futures.ThreadPoolExecutorasyncio.to_thread() 怎么选

两者都用于把阻塞操作“搬出”主线程,但适用阶段和控制粒度不同。

  • ThreadPoolExecutor 是传统线程池,适合长期复用、需精细控制线程数(如 max_workers=4)、或要统一管理生命周期(.shutdown(wait=True))的场景
  • asyncio.to_thread()(Py3.9+)更轻量,每次调用自动分配线程并 await 返回,适合零散、偶发的阻塞调用(如读文件、调用旧版同步 SDK)
  • 关键区别:前者不返回协程对象,需配合 loop.run_in_executor() 才能 await;后者直接返回可 await 的协程
import asyncio
import time
<h1>错误:直接 await 同步函数 → 主线程卡死</h1><h1>await time.sleep(1)</h1><h1>正确(Py3.9+)</h1><p>await asyncio.to_thread(time.sleep, 1)</p><div class="aritcle_card flexRow">
                                                        <div class="artcardd flexRow">
                                                                <a class="aritcle_card_img" href="/ai/1120" title="Veo"><img
                                                                                src="https://img.php.cn/upload/ai_manual/001/246/273/68b6d866d8a18215.png" alt="Veo"  onerror="this.onerror='';this.src='/static/lhimages/moren/morentu.png'" ></a>
                                                                <div class="aritcle_card_info flexColumn">
                                                                        <a href="/ai/1120" title="Veo">Veo</a>
                                                                        <p>Google 最新发布的 AI 视频生成模型</p>
                                                                </div>
                                                                <a href="/ai/1120" title="Veo" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span> </a>
                                                        </div>
                                                </div><p><span>立即学习</span>“<a href="https://pan.quark.cn/s/00968c3c2c15" style="text-decoration: underline !important; color: blue; font-weight: bolder;" rel="nofollow" target="_blank">Python免费学习笔记(深入)</a>”;</p><h1>或兼容老版本</h1><p>loop = asyncio.get_running_loop()
await loop.run_in_executor(None, time.sleep, 1)

asyncio.Lock 保护共享状态,但别锁错对象

协程并发下,threading.Lock 完全无效——它只对线程起作用,而多个协程可能跑在同一个线程里。

  • 必须用 asyncio.Lock,且每个需要保护的共享变量/资源应配独立的锁实例
  • 典型错误:所有协程共用一个全局 lock = asyncio.Lock(),结果本该互斥的两个不同资源(比如用户余额和订单号生成器)被强绑定,造成不必要等待
  • 更隐蔽的问题:在类方法中定义 self.lock = asyncio.Lock(),但忘记 await self.lock.acquire(),或忘了 try/finally 释放
class Counter:
    def __init__(self):
        self.value = 0
        self.lock = asyncio.Lock()  # 每个实例独享锁
<pre class='brush:python;toolbar:false;'>async def increment(self):
    async with self.lock:  # 自动 acquire/release
        self.value += 1
        return self.value

并发真正的复杂点不在语法,而在你是否清楚每一行代码执行时,CPU 在哪、IO 在哪、锁在哪、事件循环有没有被意外阻塞——这些不会报错,但会让吞吐量掉一半、延迟毛刺翻倍、压测时连接池耗尽。留心那些没显式写 await 却实际会阻塞的调用,比如某些数据库驱动的 .execute()、日志库的同步刷盘、甚至 json.loads() 处理超大字符串。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python Flask框架
Python Flask框架

本专题专注于 Python 轻量级 Web 框架 Flask 的学习与实战,内容涵盖路由与视图、模板渲染、表单处理、数据库集成、用户认证以及RESTful API 开发。通过博客系统、任务管理工具与微服务接口等项目实战,帮助学员掌握 Flask 在快速构建小型到中型 Web 应用中的核心技能。

100

2025.08.25

Python Flask Web框架与API开发
Python Flask Web框架与API开发

本专题系统介绍 Python Flask Web框架的基础与进阶应用,包括Flask路由、请求与响应、模板渲染、表单处理、安全性加固、数据库集成(SQLAlchemy)、以及使用Flask构建 RESTful API 服务。通过多个实战项目,帮助学习者掌握使用 Flask 开发高效、可扩展的 Web 应用与 API。

80

2025.12.15

json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

452

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

546

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

330

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

81

2025.09.10

Python FastAPI异步API开发_Python怎么用FastAPI构建异步API
Python FastAPI异步API开发_Python怎么用FastAPI构建异步API

Python FastAPI 异步开发利用 async/await 关键字,通过定义异步视图函数、使用异步数据库库 (如 databases)、异步 HTTP 客户端 (如 httpx),并结合后台任务队列(如 Celery)和异步依赖项,实现高效的 I/O 密集型 API,显著提升吞吐量和响应速度,尤其适用于处理数据库查询、网络请求等耗时操作,无需阻塞主线程。

28

2025.12.22

Python 微服务架构与 FastAPI 框架
Python 微服务架构与 FastAPI 框架

本专题系统讲解 Python 微服务架构设计与 FastAPI 框架应用,涵盖 FastAPI 的快速开发、路由与依赖注入、数据模型验证、API 文档自动生成、OAuth2 与 JWT 身份验证、异步支持、部署与扩展等。通过实际案例,帮助学习者掌握 使用 FastAPI 构建高效、可扩展的微服务应用,提高服务响应速度与系统可维护性。

251

2026.02.06

PHP高性能API设计与Laravel服务架构实践
PHP高性能API设计与Laravel服务架构实践

本专题围绕 PHP 在现代 Web 后端开发中的高性能实践展开,重点讲解基于 Laravel 框架构建可扩展 API 服务的核心方法。内容涵盖路由与中间件机制、服务容器与依赖注入、接口版本管理、缓存策略设计以及队列异步处理方案。同时结合高并发场景,深入分析性能瓶颈定位与优化思路,帮助开发者构建稳定、高效、易维护的 PHP 后端服务体系。

33

2026.03.04

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.5万人学习

Django 教程
Django 教程

共28课时 | 4.8万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号