0

0

使用 Pandas 高效批量更新 Excel 表格中的分组汇总列

碧海醫心

碧海醫心

发布时间:2026-02-18 22:05:01

|

742人浏览过

|

来源于php中文网

原创

使用 Pandas 高效批量更新 Excel 表格中的分组汇总列

本文介绍如何利用 pandas 的 groupby().transform() 方法,自动为 Excel 中重复出现的分类字段(如 AGE)计算对应数值列(如 INCOME)的组内总和,并回填至新列(如 Total),实现高效、无循环的批量更新。

本文介绍如何利用 pandas 的 `groupby().transform()` 方法,自动为 excel 中重复出现的分类字段(如 age)计算对应数值列(如 income)的组内总和,并回填至新列(如 total),实现高效、无循环的批量更新。

在处理结构化表格数据时,常需基于某分类列(如“AGE”)对数值列(如“INCOME”)进行组内聚合(如求和),并将结果广播回原始行——这正是 pandas.DataFrame.groupby().transform() 的核心应用场景。相比手动 for 循环或 iterrows(),该方法向量化、简洁且性能优异,避免了索引错位、类型转换失败等常见问题。

以下是一个完整、可直接运行的教程示例:

✅ 步骤一:读取 Excel 并预处理数据

确保 INCOME 列为数值类型(原始数据含逗号,需清洗):

Lenso.ai
Lenso.ai

AI反向图像搜索

下载
import pandas as pd

# 读取 Excel 文件(假设文件名为 'data.xlsx',位于当前目录)
df = pd.read_excel('data.xlsx')

# 清洗 INCOME:移除逗号并转为整数(若存在空值,可用 fillna(0) 处理)
df['INCOME'] = df['INCOME'].astype(str).str.replace(',', '').astype(int)

# 查看前几行确认格式
print(df.head())

✅ 步骤二:按 AGE 分组求和,并广播至每行

使用 transform('sum') 实现“组内聚合 + 行级填充”:

# 一行代码完成:为每个 AGE 组计算 INCOME 总和,并赋值给新列 'Total'
df['Total'] = df.groupby('AGE')['INCOME'].transform('sum')

? 原理说明:transform 会保持原始 DataFrame 的索引长度与顺序,将每个分组的聚合结果(如 sum)广播复制到该组所有行中。因此,所有 AGE == 32 的行,其 'Total' 值均为 50000 + 43000 + 48000 = 141000;所有 AGE == 34 的行则统一为 55000 + 38000 = 93000。

✅ 步骤三:写回 Excel(覆盖原表或另存)

# 覆盖原文件(谨慎操作!建议先备份)
df.to_excel('data_updated.xlsx', index=False)

# 或使用 ExcelWriter 精确控制工作表(如追加到指定 sheet)
# with pd.ExcelWriter('data.xlsx', engine='openpyxl', mode='a', if_sheet_exists='replace') as writer:
#     df.to_excel(writer, sheet_name='Updated', index=False)

⚠️ 注意事项

  • 数据类型务必校验:INCOME 若含非数字字符(如 "50,000"、"N/A"),astype(int) 会报错,建议添加异常处理或使用 pd.to_numeric(..., errors='coerce');
  • 空值处理:transform('sum') 默认忽略 NaN,但若 AGE 列存在空值,会导致分组异常,建议先执行 df.dropna(subset=['AGE']);
  • 性能优势:即使面对数万行数据,transform 也远快于 for 循环或 apply,因其底层基于 Cython 优化;
  • 扩展性提示:如需多列汇总(如同时计算 Total 和 AvgIncome),可链式调用:
    df['Total'] = df.groupby('AGE')['INCOME'].transform('sum')
    df['AvgIncome'] = df.groupby('AGE')['INCOME'].transform('mean').round(2)

掌握 groupby().transform() 是 Pandas 数据工程中的关键技能——它让“分组汇总并回填”这一高频任务,从易出错的显式循环,升维为声明式、可读性强、健壮性高的单行表达。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

75

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

4

2026.01.31

数据类型有哪几种
数据类型有哪几种

数据类型有整型、浮点型、字符型、字符串型、布尔型、数组、结构体和枚举等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

311

2023.10.31

php数据类型
php数据类型

本专题整合了php数据类型相关内容,阅读专题下面的文章了解更多详细内容。

223

2025.10.31

c语言 数据类型
c语言 数据类型

本专题整合了c语言数据类型相关内容,阅读专题下面的文章了解更多详细内容。

29

2026.02.12

string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

770

2023.08.02

int占多少字节
int占多少字节

int占4个字节,意味着一个int变量可以存储范围在-2,147,483,648到2,147,483,647之间的整数值,在某些情况下也可能是2个字节或8个字节,int是一种常用的数据类型,用于表示整数,需要根据具体情况选择合适的数据类型,以确保程序的正确性和性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

573

2024.08.29

c++怎么把double转成int
c++怎么把double转成int

本专题整合了 c++ double相关教程,阅读专题下面的文章了解更多详细内容。

254

2025.08.29

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

561

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Excel 教程
Excel 教程

共162课时 | 17.8万人学习

成为PHP架构师-自制PHP框架
成为PHP架构师-自制PHP框架

共28课时 | 2.6万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号