0

0

C# 自定义文件格式设计 C#如何为应用程序设计高效的二进制文件格式

煙雲

煙雲

发布时间:2026-02-26 09:58:03

|

766人浏览过

|

来源于php中文网

原创

绝大多数情况下不该自己设计二进制文件格式;仅当需极致读写性能、结构长期固定、跨平台兼容不重要或须规避json/xml开销时才考虑,且须规范头信息、紧凑struct布局、避免binaryformatter。

c# 自定义文件格式设计 c#如何为应用程序设计高效的二进制文件格式

二进制文件该不该自己设计

绝大多数情况下,不该。除非你明确需要:跨平台兼容性不重要、读写性能压倒一切、数据结构高度固定且长期不变、或者必须规避 JSON/Xml 的解析开销和体积膨胀。

常见误判是“为了安全”或“防止用户修改”——二进制本身不等于加密,也拦不住有心人;真正防篡改得靠签名,防读取得靠加密,不是换种序列化格式就能解决。

  • BinaryFormatter 已被标记为过时且不安全,绝对不要用
  • System.Text.JsonMessagePack 通常比手写二进制快得多,且更易维护
  • 如果只是想压缩体积,先试 MessagePackSerializerOptionsCompatibilityLevelUseDateTimeEncoding

头信息怎么写才不容易翻车

自定义二进制格式失败,八成栽在头信息设计上:没魔数、没版本、没长度字段,导致后续任何变更都变成不兼容升级。

一个最小可用头至少包含 3 个字段,按顺序写死(推荐 Span<byte></byte> + BinaryPrimitives 写):

  • 4 字节魔数,比如 0x4642494E("FBIN" ASCII 码),用于快速识别文件类型
  • 2 字节主版本号 + 2 字节次版本号(ushort),后续加字段只升次版本,改语义才升主版本
  • 4 字节总数据长度(不含头),方便校验截断或读取越界

别把头做成类然后 MemoryMarshal.AsBytes —— 字段顺序、填充、大小端会悄悄搞垮你。直接用 BinaryPrimitives.WriteUInt32BigEndian 这类函数逐字段写。

Shell脚本编写基础 中文WORD版
Shell脚本编写基础 中文WORD版

Shell本身是一个用C语言编写的程序,它是用户使用Linux的桥梁。Shell既是一种命令语言,又是一种程序设计语言。作为命令语言,它交互式地解释和执行用户输入的命令;作为程序设计语言,它定义了各种变量和参数,并提供了许多在高级语言中才具有的控制结构,包括循环和分支。它虽然不是Linux系统核心的一部分,但它调用了系统核心的大部分功能来执行程序、建立文件并以并行的方式协调各个程序的运行。因此,对于用户来说,shell是最重要的实用程序,深入了解和熟练掌握shell的特性极其使用方法,是用好Linux系统

下载

如何避免 struct 序列化时的内存对齐陷阱

C# 的 struct 默认按 CPU 对齐(比如 long 在 64 位系统对齐到 8 字节),但文件格式要求的是**紧凑布局**,否则写出来的字节流中间全是 padding,跨平台读取直接错位。

  • 必须加 [StructLayout(LayoutKind.Sequential, Pack = 1)]Pack = 1 是关键,禁用所有填充
  • 字段顺序要按字节大小从大到小排(longintshortbyte),否则即使 Pack = 1 也可能因编译器优化出意外
  • 字符串不能直接放 struct 里,要用 fixed byte name[32] 或单独存偏移+长度,否则引用类型破坏二进制确定性

验证方法:用 Unsafe.SizeOf<myheader>()</myheader> 检查是否等于你手动算的字节数;再用 MemoryMarshal.AsBytes 转成 byte[] 打印前 16 字节,看是否符合预期。

读写性能瓶颈往往不在序列化本身

实测中,90% 的“慢”来自 IO 层:反复 FileStream.Read 小块数据、没用 Span<byte></byte> 复用缓冲区、或把整个大文件读进 byte[] 再解析。

  • 写入时用 FileStream 构造时加 FileOptions.SequentialScan,提示 OS 预读
  • 读取固定结构头:用 Span<byte></byte> 直接指向文件开头 16 字节,调 BinaryPrimitives.ReadUInt32LittleEndian
  • 解析主体数据前,先用 fileStream.Position = header.DataOffset 跳转,别从头扫
  • 避免 BinaryReader —— 它内部带缓冲且无法控制,小数据反而更慢;纯 Span + BinaryPrimitives 才是零分配关键

最常被忽略的一点:如果你的“高效”是指毫秒级加载几百 MB 数据,那真正卡住的往往不是反序列化,而是磁盘寻道或 SSD 闪存页映射延迟——这时候该考虑内存映射 MemoryMappedFile,而不是继续抠 struct 字节序。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

448

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

544

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

324

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

81

2025.09.10

pdf怎么转换成xml格式
pdf怎么转换成xml格式

将 pdf 转换为 xml 的方法:1. 使用在线转换器;2. 使用桌面软件(如 adobe acrobat、itext);3. 使用命令行工具(如 pdftoxml)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1936

2024.04.01

xml怎么变成word
xml怎么变成word

步骤:1. 导入 xml 文件;2. 选择 xml 结构;3. 映射 xml 元素到 word 元素;4. 生成 word 文档。提示:确保 xml 文件结构良好,并预览 word 文档以验证转换是否成功。想了解更多xml的相关内容,可以阅读本专题下面的文章。

2110

2024.08.01

xml是什么格式的文件
xml是什么格式的文件

xml是一种纯文本格式的文件。xml指的是可扩展标记语言,标准通用标记语言的子集,是一种用于标记电子文件使其具有结构性的标记语言。想了解更多相关的内容,可阅读本专题下面的相关文章。

1137

2024.11.28

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

638

2023.08.03

batoto漫画官网入口与网页版访问指南
batoto漫画官网入口与网页版访问指南

本专题系统整理batoto漫画官方网站最新可用入口,涵盖最新官网地址、网页版登录页面及防走失访问方式说明,帮助用户快速找到batoto漫画官方平台,稳定在线阅读各类漫画内容。

331

2026.02.25

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C# 教程
C# 教程

共94课时 | 10.2万人学习

C 教程
C 教程

共75课时 | 5万人学习

C++教程
C++教程

共115课时 | 19.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号