0

0

C# gRPC文件流式传输 C#如何通过gRPC流式上传和下载大文件

煙雲

煙雲

发布时间:2026-03-13 11:01:47

|

191人浏览过

|

来源于php中文网

原创

gRPC流式传输必须用stream关键字定义方法,单次传大文件需分块(如FileChunk),不可用bytes硬塞;C#客户端须WriteAsync后调CompleteAsync再await ResponseAsync,服务端需流式读写防OOM,并配置HTTP/2流控与超时。

c# grpc文件流式传输 c#如何通过grpc流式上传和下载大文件

gRPC流式传输必须用 stream 关键字定义服务方法

单次传大文件不能靠 bytes 字段硬塞,Protobuf 有默认 64MB 解析限制,且内存会爆。必须在 .proto 文件里明确定义客户端流、服务端流或双向流。常见错误是写成普通 RPC(如 rpc Upload(FileRequest) returns (UploadResponse)),这根本不是流式。

正确写法示例:

service FileService {
  rpc Upload(stream FileChunk) returns (UploadResponse);
  rpc Download(FileRequest) returns (stream FileChunk);
}

FileChunk 通常包含 bytes data 和可选的 int64 offsetbool is_last 等控制字段。注意:Protobuf 的 bytes 是 base64 编码后传输的,实际二进制体积会膨胀约 33%,对吞吐敏感时得接受这点开销。

C# 客户端上传要用 AsyncClientStreamingCall 写入并等待完成

调用 Upload 这种客户端流方法时,C# gRPC 生成的客户端返回的是 AsyncClientStreamingCall<FileChunk, UploadResponse>,不是直接 await 就完事——你得先 WriteAsync 所有分块,再显式调用 CompleteAsync() 告诉服务端“数据发完了”,最后才能 await ResponseAsync 拿结果。

容易踩的坑:

  • 忘记调用 CompleteAsync() → 服务端永远收不到 EOF,卡死在等待状态
  • WriteAsync 后立刻 await ResponseAsync → 可能返回空响应或超时,因为服务端还没处理完
  • 单次 WriteAsyncFileChunk.data 超过 4MB → 触发 gRPC 默认消息大小限制,抛出 InvalidOperationException: Status(StatusCode=ResourceExhausted, Detail="...")

建议分块大小设为 1–2MB,并在 Channel 创建时加大限制:

var channel = GrpcChannel.ForAddress("https://localhost:5001",
    new GrpcChannelOptions {
        MaxReceiveMessageSize = 100 * 1024 * 1024,
        MaxSendMessageSize = 100 * 1024 * 1024
    });

C# 服务端实现流式下载要手动控制 WriteAsync 节奏

服务端处理 Download 方法时,参数是 FileRequest,返回类型是 IServerStreamWriter<FileChunk>。关键点在于:不能一次性把整个文件读进内存再循环 WriteAsync,而要用 FileStream 分块读 + 异步写,否则大文件照样 OOM。

歌者PPT
歌者PPT

歌者PPT,AI 写 PPT 永久免费

下载

实操要点:

  • FileStream.ReadAsync 配合栈上分配的 byte[](如 stackalloc byte[8192])避免 GC 压力
  • 每次 WriteAsync 前检查 Context.CancellationToken.IsCancellationRequested,支持前端取消下载
  • 不要在 WriteAsync 后加 await Task.Delay 控制速率——这会拖慢整体吞吐;真要限速,改用 ThrottlingStream 包装底层 FileStream

示例核心逻辑片段:

public override async Task Download(FileRequest request, IServerStreamWriter<FileChunk> responseStream, ServerCallContext context)
{
    await using var fs = File.OpenRead(request.Path);
    var buffer = new byte[1024 * 1024];
    int read;
    while ((read = await fs.ReadAsync(buffer, context.CancellationToken)) > 0 && !context.CancellationToken.IsCancellationRequested)
    {
        await responseStream.WriteAsync(new FileChunk { Data = ByteString.CopyFrom(buffer, 0, read) });
    }
}

HTTP/2 流控和超时配置不调就容易断连

gRPC 底层是 HTTP/2,它的流控窗口默认很小(64KB),如果客户端消费 Download 数据太慢,服务端会因流控阻塞而超时;反过来,上传时若服务端处理 chunk 太慢,客户端也可能被流控压住。这不是代码 bug,而是协议层行为。

必须调整的关键配置:

  • 服务端 Kestrel:在 Program.cs 中设置 Http2.MaxStreamsPerConnectionHttp2.KeepAlivePingDelay,避免连接被中间代理(如 Nginx)静默关闭
  • 客户端 Channel:通过 ChannelOption 设置 grpc.http2.max_ping_strikesgrpc.keepalive_time_ms
  • 所有流式方法都应在 .protooption (google.api.http) = ... 以外的超时注释,而是在 C# 调用侧传 CallOptions,例如 new CallOptions(deadline: DateTime.UtcNow.AddMinutes(30))

没调这些,传 2GB 文件大概率在 10–15 分钟左右悄无声息断开,错误日志里只有模糊的 StatusCode=CancelledStatusCode=DeadlineExceeded

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

248

2023.07.27

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

522

2023.08.04

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

610

2023.08.04

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

244

2024.02.23

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

713

2024.07.09

Nginx报404错误解决方法
Nginx报404错误解决方法

解决方法:只需要加上这段配置:try_files $uri $uri/ /index.html;即可。想了解更多Nginx的相关内容,可以阅读本专题下面的文章。

3618

2024.08.07

nginx部署php项目教程汇总
nginx部署php项目教程汇总

本专题整合了nginx部署php项目教程汇总,阅读专题下面的文章了解更多详细内容。

56

2026.01.13

nginx配置文件详细教程
nginx配置文件详细教程

本专题整合了nginx配置文件相关教程详细汇总,阅读专题下面的文章了解更多详细内容。

72

2026.01.13

TypeScript类型系统进阶与大型前端项目实践
TypeScript类型系统进阶与大型前端项目实践

本专题围绕 TypeScript 在大型前端项目中的应用展开,深入讲解类型系统设计与工程化开发方法。内容包括泛型与高级类型、类型推断机制、声明文件编写、模块化结构设计以及代码规范管理。通过真实项目案例分析,帮助开发者构建类型安全、结构清晰、易维护的前端工程体系,提高团队协作效率与代码质量。

26

2026.03.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C# 教程
C# 教程

共94课时 | 11.2万人学习

C 教程
C 教程

共75课时 | 5.4万人学习

C++教程
C++教程

共115课时 | 21.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号