Python Queue模块提供线程安全队列,内置锁机制,支持FIFO/LIFO/优先级三种类型,具备阻塞、超时、task_done与join同步机制,适用于生产者-消费者模型。

Python 的 Queue 模块提供了线程安全的队列实现,是多线程编程中进行线程间通信最常用、最可靠的方式之一。它底层自动处理锁机制,避免手动加锁出错,适合生产者-消费者模型。
Queue 的核心特点与适用场景
线程安全:所有操作(put()、get()、qsize() 等)内部已加锁,多个线程可并发调用无需额外同步。
阻塞与超时控制:支持阻塞式读写(默认),也支持设定超时时间,防止无限等待。
三种常用类型:FIFO(queue.Queue)、LIFO(queue.LifoQueue)、优先级队列(queue.PriorityQueue),默认为先进先出。
基本用法:启动生产者与消费者线程
以下是一个典型示例,模拟一个生产者往队列放数据、多个消费者从队列取数据并处理:
(注意:实际使用中建议配合 threading.Event 或 queue.Empty 异常处理来优雅退出)
- 创建队列:
q = queue.Queue(maxsize=0)(maxsize=0表示无限制) - 生产者调用
q.put(item),若队列满且未设超时,会阻塞;可加timeout=2避免死等 - 消费者调用
q.get(),若队列空,默认阻塞;建议搭配q.task_done()和q.join()实现任务完成同步 - 每次
get()后应尽快调用q.task_done(),表示该任务已处理完毕 - 主线程中调用
q.join()会阻塞,直到队列中所有任务都调用了task_done()
避免常见陷阱
不要依赖 qsize() 判断是否为空:在多线程下该值可能瞬间失效,正确做法是捕获 queue.Empty 异常。
避免忘记 task_done():否则 q.join() 将永远阻塞。
慎用 q.empty() 和 q.full():它们只是快照,无法保证后续操作的原子性。
对象序列化不是问题,但要注意引用共享:放入队列的是对象引用,若多个线程修改同一可变对象,仍需额外同步。
配合守护线程实现简洁结构
将消费者设为守护线程(daemon=True),主线程结束时自动退出,适用于后台持续处理任务的场景。但要注意:守护线程不会等待未完成的任务,所以更推荐用 q.join() 显式等待任务结束。
立即学习“Python免费学习笔记(深入)”;







