0

0

c# TPL Dataflow 是什么 c#数据流管道怎么用

星降

星降

发布时间:2026-01-13 12:16:47

|

623人浏览过

|

来源于php中文网

原创

最简数据流管道需三步:定义块→linkto链接→post或sendasync输入数据;如transformblock实现乘2减1,linkto单向连接,post非阻塞入队,sendasync等待接收。

c# tpl dataflow 是什么 c#数据流管道怎么用

TPL Dataflow 是 .NET 原生的异步数据流处理库,不是“另一个队列封装”,而是专为构建可伸缩、带背压、拓扑灵活的并发流水线设计的底层原语。它不依赖你手动管理线程或 Task 调度,而是通过 Block 之间的消息传递自动协调并发、缓冲、完成和错误传播。

怎么创建一个最简可用的数据流管道?

核心是三步:定义块 → 链接(LinkTo)→ 输入数据(PostSendAsync)。下面是一个整数乘2再减1的两级流水线:

var multiply = new TransformBlock<int, int>(x => x * 2);
var subtract = new TransformBlock<int, int>(x => x - 1);
<p>multiply.LinkTo(subtract); // 数据从 multiply 流向 subtract</p><p>multiply.Post(5); // 输入 5 → 输出 9(5×2−1)</p><div class="aritcle_card flexRow">
                                                        <div class="artcardd flexRow">
                                                                <a class="aritcle_card_img" href="/ai/977" title="超能文献"><img
                                                                                src="https://img.php.cn/upload/ai_manual/001/503/042/68b6d08a9c409895.png" alt="超能文献"  onerror="this.onerror='';this.src='/static/lhimages/moren/morentu.png'" ></a>
                                                                <div class="aritcle_card_info flexColumn">
                                                                        <a href="/ai/977" title="超能文献">超能文献</a>
                                                                        <p>超能文献是一款革命性的AI驱动医学文献搜索引擎。</p>
                                                                </div>
                                                                <a href="/ai/977" title="超能文献" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span> </a>
                                                        </div>
                                                </div><p>// 等待结果
Console.WriteLine(subtract.ReceiveAsync().Result); // 输出 9</p>
  • LinkTo 是单向、不可逆的连接;调用后,multiply 的输出会自动推给 subtract
  • Post() 是同步非阻塞写入,返回 bool 表示是否成功入队(受 BoundedCapacity 限制)
  • 若需等待写入完成(比如确认下游已接收),改用 await multiply.SendAsync(5)

为什么不用 BufferBlock 直接传数据,而要用 TransformBlock

BufferBlock<t></t> 只是“中转站”,不处理数据;TransformBlock<tinput toutput></tinput> 才是真正干活的“处理单元”。常见误用是把所有逻辑堆在 ActionBlock 里,结果无法链式复用、难以测试、丢失类型流。

  • 想做“转换”(如 stringJsonElement)、“计算”、“校验”,必须用 TransformBlock
  • 想做“副作用”(如写 DB、发 HTTP、打日志),才用 ActionBlock,且它没有输出,链路在此终止
  • BufferBlock 最适合做“解耦缓冲”或“动态路由前哨”,比如接上游不定速生产者,再用 LinkTo 分发到多个 TransformBlock

MaxDegreeOfParallelismBoundedCapacity 怎么配才不崩?

这两个参数直接决定吞吐、延迟和内存安全。设错会导致死锁、OOM 或完全串行化——不是“越大越好”。

  • MaxDegreeOfParallelism = 1(默认):块内逻辑串行执行,天然线程安全,适合有状态或顺序敏感操作(如按 ID 保序处理)
  • MaxDegreeOfParallelism > 1:启用并行,但要求处理函数是纯函数(无共享状态),否则需自行加锁
  • BoundedCapacity = n:限制 Block 内部队列长度。设为 1 时,Post() 会立即返回 false(背压生效);设为 0 则禁用内部缓冲,强制同步等待消费者空闲
  • 典型组合:new ExecutionDataflowBlockOptions { MaxDegreeOfParallelism = 4, BoundedCapacity = 100 }

真正难的不是搭出一条管道,而是让多条管道之间能条件分流、错误隔离、优雅完成。比如一个 BroadcastBlock 同时喂给过滤块和审计块,其中一个失败不能拖垮另一个——这需要显式配置 PropagateCompletion = false 和独立的 Fault() 处理。这些细节,不踩几次 InvalidOperationException: The source block has been completed 是意识不到的。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

910

2023.08.02

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

431

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

600

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

723

2023.08.10

http500解决方法
http500解决方法

http500解决方法有检查服务器日志、检查代码错误、检查服务器配置、检查文件和目录权限、检查资源不足、更新软件版本、重启服务器或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

483

2023.11.09

http请求415错误怎么解决
http请求415错误怎么解决

解决方法:1、检查请求头中的Content-Type;2、检查请求体中的数据格式;3、使用适当的编码格式;4、使用适当的请求方法;5、检查服务器端的支持情况。更多http请求415错误怎么解决的相关内容,可以阅读下面的文章。

448

2023.11.14

HTTP 503错误解决方法
HTTP 503错误解决方法

HTTP 503错误表示服务器暂时无法处理请求。想了解更多http错误代码的相关内容,可以阅读本专题下面的文章。

3198

2024.03.12

http与https有哪些区别
http与https有哪些区别

http与https的区别:1、协议安全性;2、连接方式;3、证书管理;4、连接状态;5、端口号;6、资源消耗;7、兼容性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2770

2024.08.16

Golang 测试体系与代码质量保障:工程级可靠性建设
Golang 测试体系与代码质量保障:工程级可靠性建设

Go语言测试体系与代码质量保障聚焦于构建工程级可靠性系统。本专题深入解析Go的测试工具链(如go test)、单元测试、集成测试及端到端测试实践,结合代码覆盖率分析、静态代码扫描(如go vet)和动态分析工具,建立全链路质量监控机制。通过自动化测试框架、持续集成(CI)流水线配置及代码审查规范,实现测试用例管理、缺陷追踪与质量门禁控制,确保代码健壮性与可维护性,为高可靠性工程系统提供质量保障。

48

2026.02.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
WEB前端教程【HTML5+CSS3+JS】
WEB前端教程【HTML5+CSS3+JS】

共101课时 | 9.9万人学习

JS进阶与BootStrap学习
JS进阶与BootStrap学习

共39课时 | 3.3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号