0

0

Python 领域事件发布的可靠投递

冷炫風刃

冷炫風刃

发布时间:2026-02-14 19:42:10

|

297人浏览过

|

来源于php中文网

原创

启用 publisher confirms 是 rabbitmq 生产环境可靠性的底线,需显式调用 channel.confirm(),配合 await channel.wait_for_confirms() 或回调处理 ack/nack,避免 fire-and-forget 风险。

python 领域事件发布的可靠投递

aio-pika 开启 Publisher Confirms 才算真正可靠

不启用确认机制的 publish 调用,本质上是“发完即忘”——网络断开、Broker 崩溃、磁盘满,消息就彻底蒸发。RabbitMQ 的 Publisher Confirms 不是可选项,而是生产环境的底线。

  • 必须在连接后显式调用 channel.confirm(),否则所有 publish 都走 fire-and-forget 模式
  • 不要依赖 basic_publish 的返回值:它只表示写入 socket 成功,不代表 Broker 已落盘
  • ACK/NACK 是异步到达的,需配合 await channel.wait_for_confirms() 或监听回调,不能靠 sleep 等待
  • Python 3.12+ 中若使用 asyncio.timeout() 包裹发布逻辑,超时后必须主动清理未确认消息,否则会堆积在内存里

retry_task 不能只靠 time.sleep(2 ** i)

指数退避看着合理,但实际线上会出两类典型问题:一是重试压垮下游(比如连续重试触发 500 次订单创建),二是死信队列被绕过(失败消息没进 DLX 就卡在重试循环里)。

  • 重试前先检查错误类型:ConnectionClosedError 应立即重连再试,BusinessValidationError 则该直接丢弃
  • 最大重试次数建议设为 3~5 次,超过后必须调用 channel.basic_nack(delivery_tag=..., requeue=False) 推入死信队列
  • 避免在重试逻辑里重复序列化消息体——原始 message.body 是 bytes,反复 json.loads()dumps() 可能引入编码或精度丢失
  • 如果用了 Redis 存 pending 状态,重试时要先 GET 确认该消息还没被其他实例处理,否则会重复投递

本地事务 + 事件表不是银弹,慎用于高并发写场景

把业务数据和待发事件塞进同一张 MySQL 表,靠定时任务扫表重发,听起来原子性强,但真实压测下常成性能瓶颈。

LogoMaker
LogoMaker

免费在线制作Logo,在几分钟内完成标志设计

下载
  • 每笔订单创建都额外多一次 INSERT INTO events,QPS 过 500 就可能拖慢主事务响应
  • 事件恢复服务的扫描间隔(如 30s)意味着故障恢复有天然延迟,不适合金融类强实时场景
  • 若用 SELECT ... FOR UPDATE 扫描未发送事件,容易引发行锁争用,尤其当多个恢复实例并行时
  • 更稳妥的做法是:核心链路用外部事件系统(如独立部署的 Kafka + 状态机服务),仅低频配置类变更走本地事件表

消费者端的幂等不是加个 if taskProcessed(task_id) 就完事

看似简单的判重逻辑,上线后才发现:数据库查一次、业务处理一次、再存一次标记——三步之间仍存在窗口期,重复消费照样发生。

立即学习Python免费学习笔记(深入)”;

  • 必须用原子操作完成“校验 + 标记”,例如 PostgreSQL 的 INSERT ... ON CONFLICT DO NOTHING,或 Redis 的 SET task_id 1 EX 3600 NX
  • 不要用时间戳或版本号做幂等键——如果消息重发时 task_id 相同但 payload 有差异(如金额修正),应允许覆盖处理,而非简单跳过
  • 幂等键的生命周期要匹配业务语义:支付类用 order_id + payment_id,日志类用 log_id + hash(content),不能全站统一用 uuid4()
  • 如果消费者重启导致内存中的 processed_set 清空,靠缓存兜底也不够——Redis 故障时,得有降级方案(如写本地文件 + 定时同步)

可靠性不是某个开关或一层封装,而是从生产者确认、传输重试、存储持久化到消费者幂等的完整闭环。漏掉任意一环,都可能在流量高峰或节点异常时暴露出来。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

677

2023.06.20

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

371

2023.06.21

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

284

2023.07.18

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

519

2023.07.19

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

262

2023.07.25

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

392

2023.08.08

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

537

2023.08.11

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

636

2023.08.14

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

76

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.4万人学习

Django 教程
Django 教程

共28课时 | 4.3万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号