合理选择I/O方式、缓冲机制和并发策略可显著提升Go文件读写性能。1. 使用bufio.Reader/Writer进行缓冲读写，减少系统调用；2. 根据数据特征设置缓冲区大小，建议文本处理8KB~32KB，大文件复制64KB~1MB；3. 文件拷贝优先使用io.Copy，其内置32KB缓冲区并自动优化；4. 可分割任务采用多goroutine并发处理，避免并发写同一文件句柄，通过worker池控制协程数量防止资源耗尽。顺序为：小文件直接操作，大文件加缓冲，复制用io.Copy，可并行任务上goroutine。
在Go语言开发中，文件读写是常见操作，尤其在处理大文件或高并发场景下，性能问题容易暴露。直接使用os.ReadFile或os.WriteFile虽然方便，但不适合大规模数据处理。要提升Golang文件读写性能，关键在于合理选择I/O方式、缓冲机制和并发策略。
使用bufio进行缓冲读写
频繁的小块读写会带来大量系统调用，降低效率。通过bufio.Reader和bufio.Writer引入缓冲机制，能显著减少系统调用次数。
说明： 缓冲区将多次小写操作合并为一次系统调用，大幅提升写入速度。
建议做法：
立即学习“go语言免费学习笔记（深入）”；
- 读取大文件时，使用
bufio.NewReader配合ReadBytes或ReadString逐行处理。 - 写入文件时，使用
bufio.NewWriter，并在结束时调用Flush()确保数据落盘。
file, _ := os.Open("large.log")
defer file.Close()
reader := bufio.NewReader(file)
for {
line, err := reader.ReadString('\n')
if err != nil { break }
// 处理每行
}
合理设置缓冲区大小
默认缓冲区（如4096字节）可能不适用于所有场景。根据实际数据特征调整缓冲区大小，可进一步优化性能。
说明： 过小的缓冲区无法有效减少系统调用；过大的缓冲区浪费内存，且可能增加延迟。
建议值：
- 普通文本处理：8KB ~ 32KB
- 大文件复制或二进制处理：64KB ~ 1MB
- 可通过
bufio.NewReaderSize(file, 32*1024)自定义大小
实际最优值需结合测试确定，例如使用go test -bench=.压测不同配置。
利用io.Copy高效复制文件
对于文件拷贝类操作，io.Copy是最佳选择。它内部已优化，默认使用32KB缓冲区，并适配各种Reader/Writer类型。
优势： 简洁、高效、无需手动管理缓冲。
示例：高效文件复制src, _ := os.Open("source.txt")
dst, _ := os.Create("copy.txt")
defer src.Close()
defer dst.Close()
io.Copy(dst, src) // 自动处理缓冲
并发读写提升吞吐（适用于独立数据块）
当文件可分割为独立处理的块时（如日志分析、分片上传），可采用多goroutine并发读写。
注意： 普通文件写入不支持并发写同一文件句柄，需每个goroutine写入独立文件，或通过channel串行化写操作。
适用场景：
- 多个小文件并行处理
- 大文件分块处理后合并结果
- 导出数据到多个分区文件
控制goroutine数量，避免系统资源耗尽，可使用带缓冲的worker池模式。
基本上就这些。关键是根据场景选对方法：小文件直接操作，大文件加缓冲，复制用io.Copy，可并行任务再上goroutine。不复杂但容易忽略细节。
