0

0

PHP高效处理JSON文件并按键聚合数据的教程

花韻仙語

花韻仙語

发布时间:2025-11-14 11:45:12

|

834人浏览过

|

来源于php中文网

原创

PHP高效处理JSON文件并按键聚合数据的教程

本教程旨在指导如何在php中高效处理多个json文件,将其内容解码为关联数组,并根据共同的键(如周数)对特定数值字段进行累加聚合。通过详细的步骤和代码示例,我们将学习如何读取文件、解析数据,并最终将聚合结果整理成易于展示的结构化数据,例如用于生成表格。

在现代Web开发中,处理和分析JSON格式的数据是一项常见任务。当数据分散在多个JSON文件中,并且需要根据某个共同的标识符(如日期、ID或周数)进行汇总统计时,高效的数据处理方法至关重要。本教程将详细讲解如何使用PHP读取一系列JSON文件,解析其内容,并按指定键聚合数据。

理解数据结构

首先,我们来看一下需要处理的JSON文件结构。假设每个文件都代表一个独立的数据记录,并包含以下字段:

{
    "id": "id_1638974137049",
    "weeknr": 48,
    "dayhours": 5,
    "tvt": 1.25
}

其中:

  • id: 唯一标识符。
  • weeknr: 周数,这是我们将用于聚合数据的关键字段。
  • dayhours: 每日工时。
  • tvt: 某个特定指标(例如,电视观看时间)。

我们的目标是遍历所有这些JSON文件,并计算每个 weeknr 下 dayhours 和 tvt 的总和。

立即学习PHP免费学习笔记(深入)”;

核心步骤:文件读取与初步解码

处理多个JSON文件的第一步是识别所有目标文件,然后逐一读取并解码其内容。

  1. 查找文件: 使用 glob() 函数可以方便地查找符合特定模式的文件。例如,如果所有JSON文件都位于 data/ 目录下,我们可以这样获取它们:

    蛙蛙写作——超级AI智能写作助手
    蛙蛙写作——超级AI智能写作助手

    蛙蛙写作辅助AI写文,帮助获取创意灵感,提供拆书、小说转剧本、视频生成等功能,是一款功能全面的AI智能写作工具。

    下载
    $files = glob('data/*.json'); // 获取 'data/' 目录下所有 .json 文件路径
  2. 读取与解码: 遍历文件列表,使用 file_get_contents() 读取文件内容,然后使用 json_decode() 将JSON字符串解析为PHP数据结构。为了方便后续处理,我们通常会将其解码为关联数组(通过传递 true 作为 json_decode() 的第二个参数)。

    $allJsonObjects = [];
    foreach ($files as $file) {
        $jsonContent = file_get_contents($file);
        // 确保文件内容有效,且json_decode成功
        if ($jsonContent !== false) {
            $data = json_decode($jsonContent, true); // 解码为PHP关联数组
            if (json_last_error() === JSON_ERROR_NONE) {
                $allJsonObjects[] = $data;
            } else {
                // 处理JSON解析错误
                error_log("Error decoding JSON from file {$file}: " . json_last_error_msg());
            }
        } else {
            // 处理文件读取错误
            error_log("Error reading file: {$file}");
        }
    }

    这段代码首先初始化一个空数组 $allJsonObjects 来存储所有解码后的数据。在循环中,它读取每个JSON文件,并尝试将其解码。错误处理机制被加入以应对文件读取失败或JSON格式不正确的情况。

数据聚合:按周统计

一旦所有JSON数据都被解码并存储在一个PHP数组中,下一步就是根据 weeknr 字段进行聚合。我们将创建一个新的数组,其中键是 weeknr,值是包含 dayhours 和 tvt 总和的子数组。

$weeksData = []; // 用于存储按周聚合的数据

foreach ($allJsonObjects as $record) {
    $weeknr = $record['weeknr'];

    // 使用 null coalescing operator (??) 确保在第一次遇到某个 weeknr 时,
    // dayhours 和 tvt 的初始值为 0,然后进行累加。
    $weeksData[$weeknr] = [
        'dayhours' => ($weeksData[$weeknr]['dayhours'] ?? 0) + $record['dayhours'],
        'tvt' => ($weeksData[$weeknr]['tvt'] ?? 0) + $record['tvt']
    ];
}

在这段代码中:

  • 我们初始化了 $weeksData 数组。
  • 对于 $allJsonObjects 中的每个记录,我们提取 weeknr。
  • $weeksData[$weeknr] 被用作存储特定周数据的容器。
  • ($weeksData[$weeknr]['dayhours'] ?? 0) 是关键所在。它检查 $weeksData[$weeknr]['dayhours'] 是否已经存在。如果不存在(即这是第一次处理该 weeknr 的数据),它会返回 0;否则,返回已有的值。这样,我们就可以安全地将当前记录的 dayhours 和 tvt 累加到正确的周统计中。

完整示例代码

将上述所有步骤整合起来,形成一个完整的脚本:

<?php

// 假设JSON文件位于 'data/' 目录下
// 示例文件内容:
// data/file1.json: {"id": "id_1", "weeknr": 48, "dayhours": 5, "tvt": 1.25}
// data/file2.json: {"id": "id_2", "weeknr": 48, "dayhours": 6, "tvt": 1.50}
// data/file3.json: {"id": "id_3", "weeknr": 49, "dayhours": 7, "tvt": 1.75}

// 1. 查找所有JSON文件
$files = glob('data/*.json');

if (empty($files)) {
    echo "No JSON files found in the 'data/' directory.\n";
    exit;
}

// 2. 读取并解码所有JSON文件
$allJsonObjects = [];
foreach ($files as $file) {
    $jsonContent = file_get_contents($file);
    if ($jsonContent === false) {
        error_log("Error reading file: {$file}");
        continue;
    }

    $data = json_decode($jsonContent, true);
    if (json_last_error() !== JSON_ERROR_NONE) {
        error_log("Error decoding JSON from file {$file}: " . json_last_error_msg());
        continue;
    }

    // 确保解码后的数据是一个关联数组且包含必要的键
    if (is_array($data) && isset($data['weeknr'], $data['dayhours'], $data['tvt'])) {
        $allJsonObjects[] = $data;
    } else {
        error_log("Invalid or incomplete data structure in file: {$file}");
    }
}

if (empty($allJsonObjects)) {
    echo "No valid JSON data found to process.\n";
    exit;
}

// 3. 数据聚合:按周统计
$weeksData = [];
foreach ($allJsonObjects as $record) {
    $weeknr = $record['weeknr'];

    $weeksData[$weeknr] = [
        'dayhours' => ($weeksData[$weeknr]['dayhours'] ?? 0) + $record['dayhours'],
        'tvt' => ($weeksData[$weeknr]['tvt'] ?? 0) + $record['tvt']
    ];
}

// 4. 输出结果为HTML表格
echo "<table border='1'>";
echo "<thead><tr><th>周数</th><th>总工时</th><th>总TVT小时</th></tr></thead>";
echo "<tbody>";

// 按照 weeknr 排序,使输出更规整
ksort($weeksData); 

foreach ($weeksData as $weeknr => $totals) {
    echo "<tr>";
    echo "<td>" . htmlspecialchars($weeknr) . "</td>";
    echo "<td>" . htmlspecialchars($totals['dayhours']) . "</td>";
    // 格式化 tvt 小时,保留两位小数
    echo "<td>" . htmlspecialchars(number_format($totals['tvt'], 2)) . "</td>"; 
    echo "</tr>";
}

echo "</tbody>";
echo "</table>";

?>

为了运行上述代码,请确保:

  1. 在与PHP脚本同级目录下创建一个名为 data 的文件夹。
  2. 在 data 文件夹中创建上述示例JSON文件(file1.json, file2.json, file3.json),或您自己的JSON文件。

注意事项与优化

  1. 错误处理: 在实际应用中,对 glob()、file_get_contents() 和 json_decode() 的返回值进行严格检查是必不可少的。本教程的完整示例代码已加入基本的错误日志记录和流程控制。
  2. 数据验证: 在聚合数据之前,最好对从JSON中提取的字段进行类型和值验证,确保它们是预期的数值类型,以避免潜在的计算错误。
  3. 内存管理: 如果要处理的JSON文件数量非常庞大,或者单个文件体积巨大,将所有数据一次性加载到内存中可能会导致内存溢出。在这种情况下,可以考虑流式处理(例如,逐行读取大文件)或分批处理。
  4. 性能优化: 对于极高性能要求的场景,可以考虑使用更底层的I/O操作或专门的数据处理库。但对于大多数Web应用而言,上述方法已经足够高效。
  5. 输出格式: 本教程示例将结果输出为HTML表格,但您可以根据需要轻松修改,例如输出为CSV、新的JSON文件或直接存入数据库。
  6. 排序: 在输出聚合结果时,使用 ksort($weeksData) 可以根据 weeknr(键)对结果进行排序,使输出更具可读性。

总结

通过本教程,我们学习了如何利用PHP的 glob()、file_get_contents() 和 json_decode() 函数有效地处理多个JSON文件。核心的数据聚合逻辑利用了关联数组和PHP 7引入的 null coalescing operator (??),使得按键累加统计变得简洁而安全。掌握这些技术将使您能够高效地从分散的JSON数据中提取有价值的汇总信息,并将其以结构化的方式呈现。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

455

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

546

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

334

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

82

2025.09.10

c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

254

2023.09.22

java中null的用法
java中null的用法

在Java中,null表示一个引用类型的变量不指向任何对象。可以将null赋值给任何引用类型的变量,包括类、接口、数组、字符串等。想了解更多null的相关内容,可以阅读本专题下面的文章。

1089

2024.03.01

mysql标识符无效错误怎么解决
mysql标识符无效错误怎么解决

mysql标识符无效错误的解决办法:1、检查标识符是否被其他表或数据库使用;2、检查标识符是否包含特殊字符;3、使用引号包裹标识符;4、使用反引号包裹标识符;5、检查MySQL的配置文件等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

210

2023.12.04

Python标识符有哪些
Python标识符有哪些

Python标识符有变量标识符、函数标识符、类标识符、模块标识符、下划线开头的标识符、双下划线开头、双下划线结尾的标识符、整型标识符、浮点型标识符等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

322

2024.02.23

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

3

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PHP课程
PHP课程

共137课时 | 13.3万人学习

JavaScript ES5基础线上课程教学
JavaScript ES5基础线上课程教学

共6课时 | 11.3万人学习

PHP新手语法线上课程教学
PHP新手语法线上课程教学

共13课时 | 1.0万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号