0

0

如何使用Java 8的Stream.parallel开启并行计算_并行流阈值优化

P粉602998670

P粉602998670

发布时间:2026-03-06 13:08:03

|

478人浏览过

|

来源于php中文网

原创

parallel() 并非调用即并行,实际执行取决于 forkjoinpool.commonpool() 线程可用性及数据源是否支持高效分割(如 arraylist 可、linkedlist 不可);常见错误包括共享变量非原子操作、foreach 无序不安全、未预热导致性能误判,优化关键在确认其真比串行快且无竞态。

如何使用java 8的stream.parallel开启并行计算_并行流阈值优化

parallel() 什么时候真正并行?

Java 8 的 Stream.parallel() 不是“调了就并行”,它只是把流标记为「可能并行」,最终是否并行取决于底层的 ForkJoinPool.commonPool() 是否有空闲线程,以及数据源是否支持高效分割(比如 ArrayList 可以,LinkedList 就不行)。

常见错误现象:parallel().map(...).count() 在小数据量(比如 sequential() 还慢——因为任务拆分、线程调度、结果合并的开销压倒了计算收益。

  • 使用场景:适合 CPU 密集型、无状态、可分割、单次处理耗时 ≥ 100μs 的操作(如解析 JSON 字段、数值计算)
  • 不适用场景:IO 操作(DB 查询、HTTP 调用)、含同步块或共享可变状态的 lambda、数据量
  • 验证是否真并行:在 lambda 里加 System.out.println(Thread.currentThread().getName()),看到多个 ForkJoinPool.commonPool-worker-X 才算生效

默认并行阈值怎么改?

Stream 并行不是按“元素个数”切分,而是按「任务拆分成本模型」决定的。底层用的是 CountedCompleter + 动态阈值,但这个阈值由 java.util.stream.SizeHelper 控制,**用户不能直接配置**——你看到的“阈值”其实是 ForkJoinTask 拆分策略的副作用。

真正能干预的只有两件事:

立即学习Java免费学习笔记(深入)”;

海绵音乐
海绵音乐

字节跳动推出的AI音乐生成工具

下载
  • 强制指定最小拆分粒度:用 Arrays.stream(arr, from, to)IntStream.range(0, n).parallel() 手动控制范围,避免小集合被强行进 commonPool
  • 替换公共池:通过 -Djava.util.concurrent.ForkJoinPool.common.parallelism=4 调整线程数(注意:这是 JVM 全局设置,影响所有使用 commonPool 的代码)
  • 更稳妥的做法:不用 commonPool,自己构造 ForkJoinPool,用 stream.parallel().collect(toList()) 前先 pool.submit(() -> stream.collect(...)).get()

parallel() 导致结果错乱的典型原因

并行流本身线程安全,但你的 lambda 不一定安全。最常踩的坑是「以为 map/filter 是纯函数,其实偷偷改了外部变量」。

错误示例:list.parallelStream().map(s -> { counter++; return s.toUpperCase(); }) —— counter 是共享变量,++ 非原子操作,结果必然少计数。

  • 正确做法:用 mapToInt + sum()collect(Collectors.toList()) 等归约操作,让 Stream 自己管理中间状态
  • 如果必须累积状态,用 Collectors.groupingByConcurrent()Collectors.toConcurrentMap(),别自己 new HashMap
  • 注意 forEach() 在并行流里不保证顺序,且不是线程安全的消费方式;要用 forEachOrdered()(牺牲并行性)或收集后再遍历

性能对比必须测什么?

只跑一次 System.nanoTime() 差值没意义。JIT 编译、GC、commonPool 预热都会干扰结果。

  • 至少预热 5 轮,再测 10 轮取平均(用 JMH 最好,手写至少用 Thread.sleep(100) 隔开轮次)
  • 对比组必须一致:都用 toArray() 或都用 collect(toList()),别一个 collect 一个 forEach
  • 监控线程池状态:ForkJoinPool.commonPool().getActiveThreadCount()getQueuedSubmissionCount(),如果后者持续 > 0,说明任务积压,线程数不够或任务太重
  • 特别注意 GC:并行流临时对象多,小堆下容易触发频繁 Young GC,用 jstat -gc 看真实耗时是否被 GC 吃掉

并行流的优化点从来不在“怎么开”,而在“开之前有没有确认它真比串行快、且不会引入竞态”。阈值没法配,但数据规模、任务性质、共享状态这三样,漏看任何一样,都白调 parallel()

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
counta和count的区别
counta和count的区别

Count函数用于计算指定范围内数字的个数,而CountA函数用于计算指定范围内非空单元格的个数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

203

2023.11.20

php中foreach用法
php中foreach用法

本专题整合了php中foreach用法的相关介绍,阅读专题下面的文章了解更多详细教程。

204

2025.12.04

lambda表达式
lambda表达式

Lambda表达式是一种匿名函数的简洁表示方式,它可以在需要函数作为参数的地方使用,并提供了一种更简洁、更灵活的编码方式,其语法为“lambda 参数列表: 表达式”,参数列表是函数的参数,可以包含一个或多个参数,用逗号分隔,表达式是函数的执行体,用于定义函数的具体操作。本专题为大家提供lambda表达式相关的文章、下载、课程内容,供大家免费下载体验。

214

2023.09.15

python lambda函数
python lambda函数

本专题整合了python lambda函数用法详解,阅读专题下面的文章了解更多详细内容。

192

2025.11.08

Python lambda详解
Python lambda详解

本专题整合了Python lambda函数相关教程,阅读下面的文章了解更多详细内容。

61

2026.01.05

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

434

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

600

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

743

2023.08.10

JavaScript浏览器渲染机制与前端性能优化实践
JavaScript浏览器渲染机制与前端性能优化实践

本专题围绕 JavaScript 在浏览器中的执行与渲染机制展开,系统讲解 DOM 构建、CSSOM 解析、重排与重绘原理,以及关键渲染路径优化方法。内容涵盖事件循环机制、异步任务调度、资源加载优化、代码拆分与懒加载等性能优化策略。通过真实前端项目案例,帮助开发者理解浏览器底层工作原理,并掌握提升网页加载速度与交互体验的实用技巧。

1

2026.03.06

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kotlin 教程
Kotlin 教程

共23课时 | 4.1万人学习

C# 教程
C# 教程

共94课时 | 10.7万人学习

Java 教程
Java 教程

共578课时 | 77.6万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号