0

0

如何使用Python开发异步服务_Python异步IO核心原理【技巧】

舞夢輝影

舞夢輝影

发布时间:2025-12-21 13:13:46

|

802人浏览过

|

来源于php中文网

原创

Python异步服务依赖事件循环、协程和非阻塞IO协同工作,核心是避免单线程被IO阻塞;async/await用于定义和等待协程,需配合异步库(如httpx、asyncpg)和正确并发控制(如Semaphore、gather),误用同步代码会拖垮性能。

如何使用python开发异步服务_python异步io核心原理【技巧】

Python异步服务不是靠多线程或多进程堆出来的,而是靠事件循环 + 协程 + 非阻塞IO协同工作的。核心在于让单个线程不被IO卡住,持续处理其他任务。

理解async/await和协程的本质

async def定义的函数不是普通函数,它返回一个协程对象(coroutine object),只有被事件循环调度执行时才会真正运行。await只能出现在async函数里,且后面必须是可等待对象(如另一个协程、asyncio.Future、asyncio.Task,或实现了__await__的对象)。

常见误区:
– 把同步代码直接加async/await不会变快;
– await time.sleep(1)会报错,得用await asyncio.sleep(1);
– 没有await的协程不会执行,就像定义了函数但没调用。

简单例子:

import asyncio
<p>async def fetch_data():
print("开始请求")
await asyncio.sleep(1)  # 模拟非阻塞网络延迟
return "数据已就绪"</p><p>async def main():
result = await fetch_data()  # 这里才真正执行并等待
print(result)</p><h1>启动事件循环</h1><p>asyncio.run(main())</p><p><span>立即学习</span>“<a href="https://pan.quark.cn/s/00968c3c2c15" style="text-decoration: underline !important; color: blue; font-weight: bolder;" rel="nofollow" target="_blank">Python免费学习笔记(深入)</a>”;</p>

用asyncio构建基础异步HTTP服务

推荐用StarletteFastAPI(底层基于Starlette+Pydantic),它们原生支持async视图,比Flask/Tornado更轻量、更现代。

关键点:
路由函数声明为async def;
– 数据库操作要用异步驱动(如asyncpg、aiomysql、tortoise-orm);
– 文件读写避免open(),改用aiofiles;
– 不要混用阻塞调用(如requests.get、json.loads大文件),否则会拖垮整个事件循环。

示例(FastAPI):

腾讯交互翻译
腾讯交互翻译

腾讯AI Lab发布的一款AI辅助翻译产品

下载
from fastapi import FastAPI
import httpx
<p>app = FastAPI()</p><p>@app.get("/items/")
async def read_items():
async with httpx.AsyncClient() as client:
resp = await client.get("<a href="https://www.php.cn/link/c2148796071914983ed6b6e9dbbff735">https://www.php.cn/link/c2148796071914983ed6b6e9dbbff735</a>")
return resp.json()</p>

手动管理事件循环与并发控制

日常开发中多数用asyncio.run()就够了,但在嵌入式环境、测试或与同步框架(如Django)集成时,可能需要更精细控制。

常用技巧:
– asyncio.create_task()把协程包装成Task,立即调度,适合“发出去就不用等”的场景;
– asyncio.gather()并发运行多个协程,全部完成才返回结果;
– asyncio.wait()更灵活,可设timeout、first_completed等策略;
– 用asyncio.Semaphore限制并发数,防爆资源(比如同时最多5个数据库连接)。

并发限流示例:

sem = asyncio.Semaphore(3)
<p>async def limited_fetch(url):
async with sem:  # 最多3个同时执行
async with httpx.AsyncClient() as client:
return await client.get(url)</p>

避开常见陷阱

异步不是银弹,用错反而更慢甚至出错:

  • 别在async函数里调用time.sleep()、print()太多(虽不阻塞,但高频IO影响性能)
  • 不要用threading.Lock,换asyncio.Lock;不要用queue.Queue,换asyncio.Queue
  • 数据库连接池必须用异步驱动,否则一个await就把整个循环卡死
  • 调试时print位置很重要——协程未await前只是对象,print不会触发执行
  • 日志建议用structlog或logging配置异步handler,避免阻塞

基本上就这些。异步IO本身不复杂,难的是打破同步思维惯性,养成“哪里可能阻塞,就查它有没有async版本”的习惯。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python Web 框架 Django 深度开发
Python Web 框架 Django 深度开发

本专题系统讲解 Python Django 框架的核心功能与进阶开发技巧,包括 Django 项目结构、数据库模型与迁移、视图与模板渲染、表单与认证管理、RESTful API 开发、Django 中间件与缓存优化、部署与性能调优。通过实战案例,帮助学习者掌握 使用 Django 快速构建功能全面的 Web 应用与全栈开发能力。

166

2026.02.04

Python Flask框架
Python Flask框架

本专题专注于 Python 轻量级 Web 框架 Flask 的学习与实战,内容涵盖路由与视图、模板渲染、表单处理、数据库集成、用户认证以及RESTful API 开发。通过博客系统、任务管理工具与微服务接口等项目实战,帮助学员掌握 Flask 在快速构建小型到中型 Web 应用中的核心技能。

104

2025.08.25

Python Flask Web框架与API开发
Python Flask Web框架与API开发

本专题系统介绍 Python Flask Web框架的基础与进阶应用,包括Flask路由、请求与响应、模板渲染、表单处理、安全性加固、数据库集成(SQLAlchemy)、以及使用Flask构建 RESTful API 服务。通过多个实战项目,帮助学习者掌握使用 Flask 开发高效、可扩展的 Web 应用与 API。

81

2025.12.15

json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

456

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

547

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

335

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

82

2025.09.10

Python FastAPI异步API开发_Python怎么用FastAPI构建异步API
Python FastAPI异步API开发_Python怎么用FastAPI构建异步API

Python FastAPI 异步开发利用 async/await 关键字,通过定义异步视图函数、使用异步数据库库 (如 databases)、异步 HTTP 客户端 (如 httpx),并结合后台任务队列(如 Celery)和异步依赖项,实现高效的 I/O 密集型 API,显著提升吞吐量和响应速度,尤其适用于处理数据库查询、网络请求等耗时操作,无需阻塞主线程。

28

2025.12.22

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

76

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MySQL 教程
MySQL 教程

共48课时 | 2.5万人学习

MySQL 初学入门(mosh老师)
MySQL 初学入门(mosh老师)

共3课时 | 0.3万人学习

简单聊聊mysql8与网络通信
简单聊聊mysql8与网络通信

共1课时 | 848人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号