0

0

Java中ExecutorCompletionService使用方法

P粉602998670

P粉602998670

发布时间:2025-09-22 22:04:01

|

285人浏览过

|

来源于php中文网

原创

答案:ExecutorCompletionService通过将任务结果存入阻塞队列,使结果按完成顺序而非提交顺序被处理。它结合了Executor和BlockingQueue的优点,在任务执行时间不确定的场景下,避免了因等待慢任务而阻塞后续已完成任务结果的获取。与直接使用ExecutorService的Future.get()相比,后者必须按提交顺序阻塞等待,而CompletionService提供take()方法实时获取最先完成的任务结果,提升响应速度和资源利用率。典型应用场景包括爬虫请求、渐进式数据处理和资源敏感型任务。使用时需注意异常处理(如CancellationException)、手动管理线程池生命周期、正确设置结果获取循环终止条件,并权衡其额外队列开销。代码示例展示了提交10个异步任务并按完成顺序打印结果的过程,最后安全关闭线程池。

java中executorcompletionservice使用方法

在Java中,当你需要并行执行多个任务,并且希望以任务完成的顺序(而不是提交的顺序)来处理结果时,

ExecutorCompletionService
是一个非常实用的工具。它本质上是
Executor
BlockingQueue
的结合体,让你能够异步提交任务,然后阻塞式地获取已完成的任务结果。这对于那些任务执行时间不确定,且你需要尽快处理已完成任务结果的场景来说,简直是量身定制。

解决方案

使用

ExecutorCompletionService
的核心在于将你的任务提交给它,然后通过它的
take()
方法来获取已完成的任务结果。这比直接从
ExecutorService
获取
Future
然后逐个
get()
要灵活得多,因为它不会让你被第一个提交但可能最慢的任务阻塞。

下面是一个基本的使用示例:

import java.util.concurrent.*;
import java.util.Random;

public class CompletionServiceDemo {

    public static void main(String[] args) {
        // 1. 创建一个线程池,作为ExecutorCompletionService的底层执行器
        // 我个人喜欢用FixedThreadPool,因为它能控制并发度,避免资源耗尽
        ExecutorService executor = Executors.newFixedThreadPool(5);

        // 2. 创建ExecutorCompletionService实例,将线程池传入
        // 这一步是关键,它将ExecutorService包装起来,提供了更高级的完成服务
        CompletionService<String> completionService = new ExecutorCompletionService<>(executor);

        int numberOfTasks = 10;
        Random random = new Random();

        // 3. 提交Callable任务
        // 每个任务模拟不同的执行时间
        for (int i = 0; i < numberOfTasks; i++) {
            final int taskId = i;
            completionService.submit(() -> {
                long sleepTime = random.nextInt(3000) + 500; // 模拟0.5到3.5秒的执行时间
                System.out.println("任务 " + taskId + " 开始执行,预计耗时 " + sleepTime + "ms");
                Thread.sleep(sleepTime);
                return "任务 " + taskId + " 完成,耗时 " + sleepTime + "ms";
            });
        }

        // 4. 获取并处理已完成的任务结果
        // take()方法会阻塞,直到有任务完成并返回其Future
        System.out.println("\n--- 开始获取任务结果 ---\n");
        for (int i = 0; i < numberOfTasks; i++) {
            try {
                // take()方法阻塞等待第一个完成的任务
                Future<String> future = completionService.take();
                // get()方法不会阻塞,因为任务已经完成
                String result = future.get();
                System.out.println("处理结果: " + result);
            } catch (InterruptedException e) {
                // 当前线程被中断,通常意味着需要停止处理
                Thread.currentThread().interrupt();
                System.err.println("等待任务完成时被中断: " + e.getMessage());
            } catch (ExecutionException e) {
                // 任务执行过程中抛出了异常
                System.err.println("任务执行异常: " + e.getMessage());
                // 可以进一步检查e.getCause()获取原始异常
            } catch (CancellationException e) {
                // 任务被取消了
                System.err.println("任务被取消: " + e.getMessage());
            }
        }

        // 5. 关闭线程池
        // 这一步很重要,否则程序可能不会退出
        executor.shutdown();
        try {
            if (!executor.awaitTermination(60, TimeUnit.SECONDS)) {
                executor.shutdownNow(); // 如果无法在指定时间内关闭,则强制关闭
            }
        } catch (InterruptedException e) {
            executor.shutdownNow();
            Thread.currentThread().interrupt();
        }
        System.out.println("\n所有任务处理完毕,线程池已关闭。");
    }
}

ExecutorCompletionService
ExecutorService
直接获取
Future
有什么不同?

我记得刚开始接触多线程的时候,总是习惯性地把所有

Future
都收集起来,然后挨个
get()
。结果发现,如果第一个任务是个“慢郎中”,后面那些明明已经跑完了的“快枪手”,也只能干等着。那种感觉,就像是排队买票,前面有个老大爷慢慢悠悠地数钱,后面一堆急着赶火车的都干着急。
ExecutorCompletionService
就是来解决这个痛点的,它像是给你开辟了一条“快速通道”,谁先跑完谁先出结果,不用等前面的人。

立即学习Java免费学习笔记(深入)”;

具体来说,当你直接向

ExecutorService
提交任务时,
submit()
方法会立即返回一个
Future
对象。如果你把这些
Future
对象存储在一个列表中,然后遍历列表并调用每个
Future
get()
方法,那么:

  1. 第一个
    future.get()
    调用会阻塞,直到第一个任务完成。
  2. 第二个
    future.get()
    调用会阻塞,直到第二个任务完成(即使它可能比第一个任务早完成)。 这种方式的问题在于,你必须按照任务提交的顺序来获取结果,即使后面的任务已经早早地完成了。

ExecutorCompletionService
则不同。它内部维护了一个队列,专门存放已经完成的任务的
Future
对象。当你调用
completionService.take()
时,它会阻塞,直到队列中有可用的
Future
(即有任务完成了),然后立即返回那个已完成任务的
Future
。这意味着你可以以任务完成的实际顺序来处理结果,大大提高了程序的响应性和吞吐量,尤其是在任务执行时间差异很大的场景下。

靠岸学术
靠岸学术

一款集翻译,阅读,文献管理于一体的英文文献阅读器

下载

什么时候应该考虑使用
ExecutorCompletionService

我个人在做一些爬虫项目或者数据处理管道时,特别喜欢用它。想象一下,你发出了几百个HTTP请求,有些服务器响应快,有些慢。如果我用传统的

future.get()
,我可能要等最慢的那个请求才能开始处理第一个结果。但有了
CompletionService
,第一个请求一回来,我就可以立即解析数据,甚至继续发出新的请求,整个流程就显得非常流畅和高效。

具体来说,以下几种情况,你真的应该考虑它:

  • 任务执行时间不确定且差异大: 这是最典型的场景。如果你的任务有的几毫秒完成,有的需要几秒甚至更久,并且你希望尽快处理那些已经完成的任务结果,
    ExecutorCompletionService
    能让你避免被慢任务拖累。
  • 需要实时反馈或渐进式处理结果: 例如,一个批处理系统,你希望每完成一个子任务就更新进度条,或者进行下一步操作(比如将数据写入数据库)。
    take()
    方法能让你实时获取到完成的任务,并立即进行后续处理。
  • 资源敏感型任务: 有些任务完成后,可能会释放一些宝贵的资源(如数据库连接、文件句柄)。通过
    CompletionService
    ,你可以更快地知道任务完成,从而更快地回收这些资源。
  • 避免死锁或资源耗尽: 在某些复杂的并发场景中,如果你提交了大量任务,并且需要处理它们的结果来决定是否继续提交或释放资源,
    take()
    的阻塞特性可以很好地控制流程,避免系统过载。
  • 构建响应式或事件驱动的系统: 如果你的系统需要对任务完成事件做出响应,
    CompletionService
    提供了一种优雅且高效的机制来监听这些事件。

ExecutorCompletionService
有哪些潜在的陷阱或需要注意的地方?

我曾经犯过一个错误,就是忘记处理

CancellationException
。当时想当然地以为,任务取消了就不会有
Future
出来。结果发现,它还是会出来,只不过
get()
的时候会抛异常。这就提醒我们,任何时候,对
Future
get()
操作都应该包裹在
try-catch
块里,把
InterruptedException
ExecutionException
CancellationException
都考虑进去,这样代码才足够健壮。

除了异常处理,还有一些点值得我们留意:

  • 任务取消的处理: 如果你通过
    Future.cancel(true)
    取消了一个提交给
    CompletionService
    的任务,那么这个任务的
    Future
    仍然会出现在
    take()
    的队列中。当你对这个被取消的
    Future
    调用
    get()
    时,它会抛出
    CancellationException
    。所以,你的结果处理逻辑需要能够优雅地处理这种情况。
  • 异常处理的完整性:
    future.get()
    方法可能会抛出
    InterruptedException
    (如果等待结果时当前线程被中断)、
    ExecutionException
    (如果任务执行过程中抛出了未捕获的异常)以及前面提到的
    CancellationException
    。你必须为这些异常提供健壮的捕获和处理逻辑,否则程序可能会意外终止或行为异常。
  • 底层
    ExecutorService
    的生命周期管理:
    ExecutorCompletionService
    只是一个包装器,它不负责管理底层
    ExecutorService
    的生命周期。这意味着你需要手动调用
    executor.shutdown()
    来关闭线程池,否则程序可能无法正常退出,或者线程资源得不到释放。我通常会用
    try-finally
    或者在所有任务完成后显式地关闭。
  • 结果获取循环的终止条件: 在获取结果的循环中,你需要一个明确的终止条件,例如知道总共有多少个任务需要处理,或者有一个哨兵任务来指示所有任务已提交。如果循环条件设置不当,
    take()
    可能会无限期地阻塞下去,导致程序卡死。
  • 性能考量(微小开销): 对于非常简单、执行时间极短且对处理顺序没有特殊要求的任务,
    ExecutorCompletionService
    引入了一个额外的队列层,可能会带来微乎其微的性能开销。但在绝大多数实际场景中,其带来的便利性和效率提升远超这点开销。

总的来说,

ExecutorCompletionService
是一个非常强大的工具,但它的威力需要你正确地理解和使用。多思考异常情况和资源管理,你的代码会更加健壮和高效。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

447

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

606

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

766

2023.08.10

Python 多线程与异步编程实战
Python 多线程与异步编程实战

本专题系统讲解 Python 多线程与异步编程的核心概念与实战技巧,包括 threading 模块基础、线程同步机制、GIL 原理、asyncio 异步任务管理、协程与事件循环、任务调度与异常处理。通过实战示例,帮助学习者掌握 如何构建高性能、多任务并发的 Python 应用。

377

2025.12.24

java多线程相关教程合集
java多线程相关教程合集

本专题整合了java多线程相关教程,阅读专题下面的文章了解更多详细内容。

32

2026.01.21

C++多线程相关合集
C++多线程相关合集

本专题整合了C++多线程相关教程,阅读专题下面的的文章了解更多详细内容。

30

2026.01.21

C# 多线程与异步编程
C# 多线程与异步编程

本专题深入讲解 C# 中多线程与异步编程的核心概念与实战技巧,包括线程池管理、Task 类的使用、async/await 异步编程模式、并发控制与线程同步、死锁与竞态条件的解决方案。通过实际项目,帮助开发者掌握 如何在 C# 中构建高并发、低延迟的异步系统,提升应用性能和响应速度。

103

2026.02.06

数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

389

2023.06.29

TypeScript类型系统进阶与大型前端项目实践
TypeScript类型系统进阶与大型前端项目实践

本专题围绕 TypeScript 在大型前端项目中的应用展开,深入讲解类型系统设计与工程化开发方法。内容包括泛型与高级类型、类型推断机制、声明文件编写、模块化结构设计以及代码规范管理。通过真实项目案例分析,帮助开发者构建类型安全、结构清晰、易维护的前端工程体系,提高团队协作效率与代码质量。

26

2026.03.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kotlin 教程
Kotlin 教程

共23课时 | 4.4万人学习

C# 教程
C# 教程

共94课时 | 11.3万人学习

Java 教程
Java 教程

共578课时 | 81.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号