0

0

Java并发编程中的BlockingQueue与生产者消费者模式

P粉602998670

P粉602998670

发布时间:2026-01-14 13:15:09

|

587人浏览过

|

来源于php中文网

原创

blockingqueue 仅保证单操作原子性,不支持多步逻辑原子性;需避免非原子检查、慎选实现类、处理消费者异常、监控队列水位而非仅拒绝率。

java并发编程中的blockingqueue与生产者消费者模式

BlockingQueue 是线程安全的队列,但不是万能的“自动同步”工具

很多人看到 BlockingQueue 名字里有 “Blocking”,就默认它能解决所有并发协调问题。其实它只保证单次 put()take()offer() 等操作的原子性与阻塞语义,并不保证多步逻辑(比如“检查再插入”)的原子性。生产者消费者模式中,如果在 BlockingQueue 外额外加锁或做条件判断,反而可能破坏其设计初衷,引发死锁或重复消费。

实操建议:

  • 优先使用 queue.take()queue.put(item),它们天然支持阻塞等待,无需手动 wait()/notify()
  • 避免写类似 if (!queue.isEmpty()) queue.poll() —— 这是非原子的,可能在 isEmpty() 后被其他线程取走元素,导致空指针或逻辑错乱
  • 若需超时控制,用 queue.poll(5, TimeUnit.SECONDS)queue.offer(item, 3, TimeUnit.SECONDS),而非轮询 + Thread.sleep()

不同 BlockingQueue 实现对生产者消费者吞吐量影响显著

ArrayBlockingQueueLinkedBlockingQueueSynchronousQueue 表面都实现 BlockingQueue 接口,但内部机制差异极大,直接决定你的系统是“稳住”还是“卡住”。

常见错误现象:用 LinkedBlockingQueue 默认构造(无界),结果生产者一路狂奔,内存耗尽 OOM;或用 SynchronousQueue 时没配好线程数,任务大量阻塞在 put() 上,CPU 却很低。

立即学习Java免费学习笔记(深入)”;

玻璃钢企业网站源码1.5
玻璃钢企业网站源码1.5

本程序源码为asp与acc编写,并没有花哨的界面与繁琐的功能,维护简单方便,只要你有一些点点asp的基础,二次开发易如反掌。 1.功能包括产品,新闻,留言簿,招聘,下载,...是大部分中小型的企业建站的首选。本程序是免费开源,只为大家学习之用。如果用于商业,版权问题概不负责。1.采用asp+access更加适合中小企业的网站模式。 2.网站页面div+css兼容目前所有主流浏览器,ie6+,Ch

下载

实操建议:

  • ArrayBlockingQueue:适合已知最大容量、强调缓存+可控背压的场景;必须指定容量,且是基于数组的**单锁**实现,高并发下竞争明显
  • LinkedBlockingQueue:默认构造等价于 Integer.MAX_VALUE 容量,慎用;指定容量后是**双锁**(putLock/takeLock),吞吐通常优于 ArrayBlockingQueue
  • SynchronousQueue:不存储元素,每个 put() 必须等待配对的 take(),本质是线程间“手递手”交接,适合任务分发模型(如 Executors.newCachedThreadPool() 底层)

消费者线程意外退出会导致消息丢失,必须显式处理异常

典型代码中,消费者常写成

while (!Thread.currentThread().isInterrupted()) {
    try {
        String msg = queue.take();
        process(msg);
    } catch (InterruptedException e) {
        Thread.currentThread().interrupt();
        break;
    }
}
看起来没问题,但如果 process(msg) 抛出未捕获异常(比如 NullPointerExceptionIOException),整个循环会中断,当前消息丢失,且线程静默退出——监控很难发现。

实操建议:

  • 所有消费者逻辑必须包裹在 try-catch(Throwable) 中,至少记录日志并继续循环
  • 不要依赖 InterruptedException 作为唯一退出信号;业务上可配合 queue.poll(timeout) + 超时检查来实现优雅关闭
  • 若需确保消息不丢,考虑把 process() 改为幂等操作,或引入外部确认机制(如消费成功后再 queue.remove(),但这已脱离标准 BlockingQueue 模式)

与 ExecutorService 配合时,拒绝策略容易掩盖队列瓶颈

new ThreadPoolExecutor(core, max, keepAlive, unit, new LinkedBlockingQueue(100)) 时,很多人以为队列满就会触发拒绝策略。实际上,只要 LinkedBlockingQueue 有空间(哪怕只剩 1 个),任务就进队列,线程池不会拒绝;只有队列真满了,才走 RejectedExecutionHandler

这意味着:你看到的 “任务堆积”,很可能只是队列在默默吃掉请求,而消费者处理不过来,延迟越来越高,监控却看不到拒绝率上升。

实操建议:

  • 监控重点不是拒绝数,而是 queue.size() 和消费者平均处理耗时;可用 ThreadPoolExecutor.getQueue().size() 定期采样
  • 避免用无界队列搭配固定大小线程池;更合理的组合是:小容量有界队列 + CallerRunsPolicy,让调用线程自己执行任务,自然反压上游
  • 如果必须用大容量队列,记得设置 allowCoreThreadTimeOut(true),否则核心线程永远不回收,无法应对流量低谷
真正难的从来不是选哪个 BlockingQueue 实现,而是想清楚:消息是否允许丢失、延迟是否可接受、系统在满载时该表现为什么样子。这些决策藏在 take()put() 的间隙里,不在文档里。

相关文章

编程速学教程(入门课程)
编程速学教程(入门课程)

编程怎么学习?编程怎么入门?编程在哪学?编程怎么学才快?不用担心,这里为大家提供了编程速学教程(入门课程),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
if什么意思
if什么意思

if的意思是“如果”的条件。它是一个用于引导条件语句的关键词,用于根据特定条件的真假情况来执行不同的代码块。本专题提供if什么意思的相关文章,供大家免费阅读。

846

2023.08.22

硬盘接口类型介绍
硬盘接口类型介绍

硬盘接口类型有IDE、SATA、SCSI、Fibre Channel、USB、eSATA、mSATA、PCIe等等。详细介绍:1、IDE接口是一种并行接口,主要用于连接硬盘和光驱等设备,它主要有两种类型:ATA和ATAPI,IDE接口已经逐渐被SATA接口;2、SATA接口是一种串行接口,相较于IDE接口,它具有更高的传输速度、更低的功耗和更小的体积;3、SCSI接口等等。

1923

2023.10.19

PHP接口编写教程
PHP接口编写教程

本专题整合了PHP接口编写教程,阅读专题下面的文章了解更多详细内容。

656

2025.10.17

php8.4实现接口限流的教程
php8.4实现接口限流的教程

PHP8.4本身不内置限流功能,需借助Redis(令牌桶)或Swoole(漏桶)实现;文件锁因I/O瓶颈、无跨机共享、秒级精度等缺陷不适用高并发场景。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2392

2025.12.29

java接口相关教程
java接口相关教程

本专题整合了java接口相关内容,阅读专题下面的文章了解更多详细内容。

47

2026.01.19

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

443

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

605

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

765

2023.08.10

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

3

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kotlin 教程
Kotlin 教程

共23课时 | 4.3万人学习

C# 教程
C# 教程

共94课时 | 11.1万人学习

Java 教程
Java 教程

共578课时 | 80.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号