0

0

SQLAlchemy异步会话管理:优化PostgreSQL连接池与会话关闭

DDD

DDD

发布时间:2025-10-07 11:58:12

|

875人浏览过

|

来源于php中文网

原创

sqlalchemy异步会话管理:优化postgresql连接池与会话关闭

本文深入探讨了SQLAlchemy异步会话在PostgreSQL中连接持久性的问题。我们将解析SQLAlchemy连接池的工作机制,解释为何数据库连接在会话关闭后仍可能保持开放,并指导如何通过配置pool_size参数来管理连接池大小。同时,文章强调了使用上下文管理器进行异步会话管理的最佳实践,避免冗余的session.close()调用,确保高效且正确的资源释放。

1. 理解数据库连接持久性:为何连接不立即关闭?

在使用SQLAlchemy与PostgreSQL进行异步交互时,开发者可能会观察到一个现象:即使代码逻辑上已经“关闭”了数据库会话,但通过数据库工具查看,仍有多个连接保持开放状态。这并非异常,而是SQLAlchemy连接池(Connection Pooling)机制的正常行为,旨在优化性能和资源利用。

数据库连接的建立和关闭是相对耗时的操作。为了避免每次请求都重新建立连接的开销,SQLAlchemy默认会启用连接池。连接池会在后台维护一定数量的数据库连接,当应用程序需要连接时,它会从池中获取一个可用的连接;当会话结束时,该连接并不会真正关闭,而是被归还到连接池中,供后续请求复用。这种机制显著提高了应用程序的响应速度和效率。

2. SQLAlchemy连接池机制详解

SQLAlchemy的连接池是其核心组件之一,尤其在异步环境中,通过create_async_engine创建的引擎默认就集成了连接池功能。

  • 连接池的作用

    • 性能提升:减少了连接建立和断开的开销。
    • 资源管理:限制了同时打开的数据库连接数量,防止资源耗尽。
    • 连接复用:已建立的连接可以被多个会话复用。
  • pool_size 参数: 连接池会维护一个最小数量的空闲连接,这个数量可以通过 pool_size 参数进行配置。默认情况下,SQLAlchemy的连接池大小通常为5。这意味着即使没有活跃的会话在使用连接,连接池也会尝试保持5个连接处于开放状态,以备不时之需。

    要调整连接池的大小,应在创建异步引擎时通过 create_async_engine 函数设置 pool_size 参数。

    示例代码:配置连接池大小

    from sqlalchemy.ext.asyncio import create_async_engine
    
    # 配置一个连接池,最大保持10个空闲连接
    db_engine = create_async_engine(
        '',
        echo=False,
        future=True,
        pool_size=10,  # 设置连接池大小为10
        max_overflow=5 # 允许连接池在高峰期临时超出pool_size的连接数
    )
    • pool_size: 连接池中保持的固定连接数。当所有连接都被占用时,如果未达到 pool_size + max_overflow,将创建新连接。
    • max_overflow: 允许连接池在 pool_size 基础上额外创建的最大连接数。例如,pool_size=10, max_overflow=5 意味着连接池最多可以有15个活跃连接。

3. 异步会话的正确管理与关闭

在SQLAlchemy的异步编程中,使用上下文管理器(async with 语句)是管理会话和连接的推荐方式。它确保了资源的正确获取和释放。

Quillbot
Quillbot

一款AI写作润色工具,QuillBot的人工智能改写工具将提高你的写作能力。

下载

考虑以下原始代码片段:

from sqlalchemy.ext.asyncio import AsyncSession, create_async_engine, async_sessionmaker

db_engine = create_async_engine('', echo=False, future=True)
async_session = async_sessionmaker(db_engine, class_=AsyncSession, expire_on_commit=False)


async def get_session() -> AsyncSession:
    async with async_session() as session:
        yield session
        await session.close() # 这一行是冗余的!

上述代码中,await session.close() 这一行是多余的,并且可能导致误解。

  • 上下文管理器的作用:当使用 async with async_session() as session: 语句时,SQLAlchemy的上下文管理器会自动处理会话的生命周期。这意味着当代码块执行完毕或发生异常退出时,上下文管理器会自动调用会话的 close() 方法。对于从连接池获取的会话,close() 操作实际上是将连接归还到连接池中,而不是真正关闭底层的数据库连接。

  • 优化后的代码示例: 因此,正确的做法是完全依赖上下文管理器,移除显式的 session.close() 调用。

    from sqlalchemy.ext.asyncio import AsyncSession, create_async_engine, async_sessionmaker
    
    # 配置连接池大小(示例,可根据实际需求调整)
    db_engine = create_async_engine(
        '',
        echo=False,
        future=True,
        pool_size=10,  # 连接池中保持的连接数
        max_overflow=5 # 允许的额外连接数
    )
    # 创建异步会话工厂
    async_session = async_sessionmaker(db_engine, class_=AsyncSession, expire_on_commit=False)
    
    async def get_session() -> AsyncSession:
        """
        获取一个异步数据库会话。
        使用yield作为依赖注入,确保会话在请求结束后被正确关闭(归还到连接池)。
        """
        async with async_session() as session:
            yield session
            # 无需手动调用 session.close(),上下文管理器会自动处理

    在这个优化后的 get_session 函数中,yield session 将会话传递给调用者。当调用者完成操作后,控制权返回到 async with 块,此时上下文管理器会自动执行清理工作,将会话关联的连接归还到 db_engine 管理的连接池中。

4. 注意事项与最佳实践

  • 合理设置 pool_size:pool_size 的值应根据应用程序的并发需求和数据库服务器的承载能力来决定。过小可能导致连接等待,过大则可能浪费数据库资源或超出数据库最大连接限制。
  • 理解 max_overflow:max_overflow 允许连接池在短时间内创建超出 pool_size 的额外连接,以应对突发的连接高峰。但这些溢出连接在空闲一段时间后会被关闭。
  • 不要混淆会话关闭与连接关闭:session.close() 将会话标记为关闭,并将其底层连接归还到连接池。它不意味着底层的TCP/IP连接被物理断开。
  • 连接池的生命周期:db_engine(及其内部的连接池)通常应在应用程序的整个生命周期中保持单例。频繁地创建和销毁引擎会失去连接池的优势。
  • 官方文档是最佳资源:对于更深入的连接池配置和高级用法,请务必查阅SQLAlchemy的官方文档:https://www.php.cn/link/aa16b1e36967dda0f92705a0a1beb710

5. 总结

SQLAlchemy的连接池机制是其高性能的关键之一,它通过复用数据库连接来减少开销。因此,观察到数据库连接在会话结束后仍然开放是正常且期望的行为。正确的会话管理应依赖 async with 上下文管理器,它会自动处理会话的关闭(即归还连接到连接池),开发者无需手动调用 session.close()。通过合理配置 create_async_engine 中的 pool_size 和 max_overflow 参数,可以有效地管理应用程序的数据库连接资源,确保系统在高并发下的稳定性和效率。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
session失效的原因
session失效的原因

session失效的原因有会话超时、会话数量限制、会话完整性检查、服务器重启、浏览器或设备问题等等。详细介绍:1、会话超时:服务器为Session设置了一个默认的超时时间,当用户在一段时间内没有与服务器交互时,Session将自动失效;2、会话数量限制:服务器为每个用户的Session数量设置了一个限制,当用户创建的Session数量超过这个限制时,最新的会覆盖最早的等等。

315

2023.10.17

session失效解决方法
session失效解决方法

session失效通常是由于 session 的生存时间过期或者服务器关闭导致的。其解决办法:1、延长session的生存时间;2、使用持久化存储;3、使用cookie;4、异步更新session;5、使用会话管理中间件。

751

2023.10.18

cookie与session的区别
cookie与session的区别

本专题整合了cookie与session的区别和使用方法等相关内容,阅读专题下面的文章了解更详细的内容。

93

2025.08.19

postgresql常用命令
postgresql常用命令

postgresql常用命令psql、createdb、dropdb、createuser、dropuser、l、c、dt、d table_name、du、i file_name、e和q等。本专题为大家提供postgresql相关的文章、下载、课程内容,供大家免费下载体验。

158

2023.10.10

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

980

2023.11.02

postgresql常用命令有哪些
postgresql常用命令有哪些

postgresql常用命令psql、createdb、dropdb、createuser、dropuser、l、c、dt、d table_name、du、i file_name、e和q等。更详细的postgresql常用命令,大家可以访问下面的文章。

199

2023.11.16

postgresql常用命令介绍
postgresql常用命令介绍

postgresql常用命令有l、d、d5、di、ds、dv、df、dn、db、dg、dp、c、pset、show search_path、ALTER TABLE、INSERT INTO、UPDATE、DELETE FROM、SELECT等。想了解更多postgresql的相关内容,可以阅读本专题下面的文章。

271

2023.11.20

数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

358

2023.06.29

java入门学习合集
java入门学习合集

本专题整合了java入门学习指南、初学者项目实战、入门到精通等等内容,阅读专题下面的文章了解更多详细学习方法。

1

2026.01.29

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Bootstrap 5教程
Bootstrap 5教程

共46课时 | 3.1万人学习

AngularJS教程
AngularJS教程

共24课时 | 3.1万人学习

CSS教程
CSS教程

共754课时 | 25万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号