0

0

如何在Golang中处理具有递归结构的JSON文件解析

P粉602998670

P粉602998670

发布时间:2026-03-02 09:38:03

|

415人浏览过

|

来源于php中文网

原创

json.rawmessage 是解析未知嵌套 json 的最稳妥起点,它延迟解析、避免类型冲突与 panic,配合自定义 unmarshaljson、json.decoder 流式处理及 json.number 精度控制可安全应对递归结构。

如何在golang中处理具有递归结构的json文件解析

解析嵌套层级未知的 JSON 时,json.RawMessage 是最稳妥的起点

Go 的 json.Unmarshal 默认要求结构体字段类型与 JSON 字段严格匹配,一旦遇到递归结构(比如无限嵌套的 "children" 数组),硬编码 struct 会立刻失效。直接用 map[string]interface{} 虽然能绕过类型检查,但后续取值繁琐、类型断言易 panic,且无法复用已有业务逻辑。

真正实用的做法是:把不确定是否递归的字段声明为 json.RawMessage,延迟解析。它本质是未解析的 JSON 字节切片,不触发解码,也不校验结构。

  • 适用于字段可能为对象、数组、null,或嵌套自身(如树形节点)的场景
  • json.RawMessage 必须是字节切片类型,不能是 string 或指针;赋值前需确保数据有效(比如非空、合法 JSON 片段)
  • 后续调用 json.Unmarshal 解析该字段时,才真正触发类型校验——这时你已能根据上下文决定用哪个 struct 或继续用 json.RawMessage
type Node struct {
    ID       int              `json:"id"`
    Name     string           `json:"name"`
    Children json.RawMessage  `json:"children"` // 不急着解析
}

用自引用 struct + UnmarshalJSON 实现安全递归解析

如果确定结构是“节点包含自身类型的子节点数组”,可以定义自引用 struct,并实现 UnmarshalJSON 方法。这是比全用 map[string]interface{} 更类型安全、更易维护的方式。

关键点在于:在自定义解码逻辑中,先判断 children 字段是否存在、是否为数组、是否为空,再逐个递归解析。避免无限循环或 panic。

立即学习go语言免费学习笔记(深入)”;

通义灵码
通义灵码

阿里云出品的一款基于通义大模型的智能编码辅助工具,提供代码智能生成、研发智能问答能力

下载
  • 必须检查 len(data)json.Valid(data),否则空字段或非法 JSON 会导致 Unmarshal 失败并 panic
  • 递归调用 json.Unmarshal 时,传入的是子节点的原始字节(从 json.RawMessage 提取),不是整个父对象
  • 不要在 UnmarshalJSON 中直接调用 json.Unmarshal(data, &n) —— 这会触发无限递归;应先解到临时 map 或用 json.Decoder 流式处理
func (n *Node) UnmarshalJSON(data []byte) error {
    type Alias Node // 防止无限递归
    aux := &struct {
        Children json.RawMessage `json:"children"`
        *Alias
    }{
        Alias: (*Alias)(n),
    }
    if err := json.Unmarshal(data, &aux); err != nil {
        return err
    }
    if len(aux.Children) == 0 || bytes.Equal(aux.Children, []byte("null")) {
        return nil
    }
    var children []Node
    if err := json.Unmarshal(aux.Children, &children); err != nil {
        return err
    }
    n.Children = children
    return nil
}

json.Decoder 配合流式读取,避免大文件 OOM

当 JSON 文件体积较大(几十 MB 以上)、且递归层级深时,一次性 json.Unmarshal 整个文件会把全部内容加载进内存,极易触发 OOM。此时应改用 json.Decoder,边读边解析,按需构建节点。

特别适合处理扁平化但逻辑上递归的结构,比如日志事件嵌套上下文、配置项继承链等。

  • json.Decoder.Token() 可以逐个读取 token(字符串、数字、{、[、]、} 等),手动控制解析流程
  • 用栈([]*Node)维护当前路径上的父节点,遇到 { 就 push 新节点,遇到 } 就 pop 并挂载到父节点的 Children
  • 错误处理必须覆盖所有 token 类型分支,否则容易卡在某个 token 上无限循环
dec := json.NewDecoder(file)
for dec.More() {
    var node Node
    if err := dec.Decode(&node); err != nil {
        // 处理单个节点解析失败,不影响后续
        continue
    }
    // 挂载到树中...
}

别忽略 json.Number 和空值对递归逻辑的影响

默认情况下,json.Unmarshal 把数字解析成 float64,但某些 API 返回的 ID 是整数且可能超 float64 精度(如 64 位时间戳、MongoDB ObjectId)。若递归结构里含这类字段,直接用 float64 接收会导致精度丢失或比较失败。

另一个常见坑是 null:JSON 中的 "children": null"children": [] 在 Go 里行为完全不同。前者解到 []Node 会是 nil,后者是空 slice——但很多业务代码没区分这两者,导致遍历时 panic 或跳过合法分支。

  • 启用 UseNumber() 让 decoder 返回 json.Number,后续按需转 int64string
  • 对可选的递归字段(如 Children),优先定义为指针类型(*[]Node)或使用自定义 unmarshal,显式处理 null、缺失、空数组三种情况
  • 测试用例必须覆盖 null、空数组、单层、多层嵌套、深层但某中间节点为 null 等边界
递归 JSON 解析真正的复杂点不在语法,而在于你得同时盯住三件事:结构是否真递归(还是只是深度嵌套)、数据来源是否可信(有没有意外的 null 或类型错乱)、以及内存模型是否允许一次性加载。漏掉任意一个,线上就容易出 silent fail。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

207

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

242

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

352

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

214

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

407

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

428

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

200

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

1233

2025.06.17

Golang 测试体系与代码质量保障:工程级可靠性建设
Golang 测试体系与代码质量保障:工程级可靠性建设

Go语言测试体系与代码质量保障聚焦于构建工程级可靠性系统。本专题深入解析Go的测试工具链(如go test)、单元测试、集成测试及端到端测试实践,结合代码覆盖率分析、静态代码扫描(如go vet)和动态分析工具,建立全链路质量监控机制。通过自动化测试框架、持续集成(CI)流水线配置及代码审查规范,实现测试用例管理、缺陷追踪与质量门禁控制,确保代码健壮性与可维护性,为高可靠性工程系统提供质量保障。

24

2026.02.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
WEB前端教程【HTML5+CSS3+JS】
WEB前端教程【HTML5+CSS3+JS】

共101课时 | 9.8万人学习

JS进阶与BootStrap学习
JS进阶与BootStrap学习

共39课时 | 3.3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号