本文详细介绍了如何在python pandas中规范化处理带有'+'或'-'前缀的dataframe列。通过识别并反转负号列的值，然后利用正则表达式统一列名，最后通过`groupby`和`sum`操作，将正负列合并为单一的、无前缀的列，实现数据归一化，并生成清晰的最终结果dataframe。
在数据分析和处理中，我们经常会遇到需要对DataFrame中的特定列进行组合或归一化的情况。本教程将指导您如何高效地处理一类特殊的数据集：其中某些列名带有+或-前缀，表示其值的性质或应进行的运算。我们的目标是将这些带有符号前缀的列合并，例如将-ColXX的值从+ColXX中减去，最终得到一个不带任何前缀的归一化列。
假设我们有一个Pandas DataFrame，其列名可能包含+或-前缀。例如，+Col01和-Col01可能代表某个指标的正向贡献和负向贡献。我们希望将它们合并为Col01，其中Col01的值是+Col01的值减去-Col01的值。如果只有+ColXX或-ColXX，则直接保留其值（对于-ColXX，需要取其负值）。
首先，我们创建一个示例DataFrame来模拟这种数据结构：
import pandas as pd
# 示例数据
data = {
'RepID': [1, 2, 3, 4, 5],
'+Col01': [5, 1, 9, 3, 0],
'+Col02': [7, 3, 8, 1, 7],
'+Col03': [9, 3, 0, 0, 1],
'-Col01': [8, 3, 9, 5, 2],
'+Col04': [3, 1, 4, 8, 0],
'+Col05': [8, 2, 9, 7, 0],
'-Col03': [1, 2, 5, 1, 2],
'-Col04': [9, 3, 1, 0, 9],
'+Col06': [4, 6, 2, 9, 2],
'-Col07': [6, 0, 0, 2, 1]
}
df = pd.DataFrame(data)
print("原始DataFrame:")
print(df)原始DataFrame示例输出:
RepID +Col01 +Col02 +Col03 -Col01 +Col04 +Col05 -Col03 -Col04 +Col06 -Col07 0 1 5 7 9 8 3 8 1 9 4 6 1 2 1 3 3 3 1 2 2 3 6 0 2 3 9 8 0 9 4 9 5 1 2 0 3 4 3 1 0 5 8 7 1 0 9 2 4 5 0 7 1 2 0 0 2 9 2 1
为了实现列的归一化，我们将采取以下三个主要步骤：
首先，我们需要识别所有以-开头的列。对于这些列，我们将它们的值乘以-1。这样做的目的是将“减去”操作转换为“加上一个负数”的操作，为后续的聚合做准备。
# 识别所有以 '-' 开头的列
negative_cols = df.columns[df.columns.str.startswith('-')]
# 将这些列的值乘以 -1
df[negative_cols] = df[negative_cols].mul(-1)
print("\n调整负号列后的DataFrame:")
print(df)调整负号列后的DataFrame输出:
RepID +Col01 +Col02 +Col03 -Col01 +Col04 +Col05 -Col03 -Col04 +Col06 -Col07 0 1 5 7 9 -8 3 8 -1 -9 4 -6 1 2 1 3 3 -3 1 2 -2 -3 6 0 2 3 9 8 0 -9 4 9 -5 -1 2 0 3 4 3 1 0 -5 8 7 -1 0 9 -2 4 5 0 7 1 -2 0 0 -2 -9 2 -1
接下来，我们需要为所有相关列创建一个统一的“基础”列名，即去除+或-前缀。这可以通过字符串替换和正则表达式来实现。
# 使用正则表达式去除列名中的 '+' 或 '-' 前缀
# '[+-]' 匹配 '+' 或 '-'
# regex=True 表示使用正则表达式
standardized_col_names = df.columns.str.replace('[+-]', '', regex=True)
print("\n标准化列名（用于分组）:")
print(standardized_col_names)标准化列名输出示例:
Index(['RepID', 'Col01', 'Col02', 'Col03', 'Col01', 'Col04', 'Col05', 'Col03',
'Col04', 'Col06', 'Col07'],
dtype='object')可以看到，+Col01和-Col01都变成了Col01，+Col03和-Col03都变成了Col03，以此类推。
有了标准化后的列名作为分组依据，我们就可以使用Pandas的groupby功能，并指定axis=1（按列分组），然后对每个组内的值进行求和。由于我们在上一步已经将负号列的值调整为负数，这里的求和操作实际上就完成了我们所需的减法。
# 按标准化后的列名进行分组，并对每个组求和
# axis=1 表示按列进行分组操作
# sort=False 保持原始列的相对顺序
final_df = df.groupby(standardized_col_names, axis=1, sort=False).sum()
print("\n最终归一化后的DataFrame:")
print(final_df)最终归一化后的DataFrame输出:
RepID Col01 Col02 Col03 Col04 Col05 Col06 Col07 0 1 -3 7 8 -6 8 4 -6 1 2 -2 3 1 -2 2 6 0 2 3 0 8 -5 3 9 2 0 3 4 -2 1 -1 8 7 9 -2 4 5 -2 7 -1 -9 0 2 -1
将上述步骤整合到一起，形成一个完整的解决方案：
import pandas as pd
# 1. 示例数据
data = {
'RepID': [1, 2, 3, 4, 5],
'+Col01': [5, 1, 9, 3, 0],
'+Col02': [7, 3, 8, 1, 7],
'+Col03': [9, 3, 0, 0, 1],
'-Col01': [8, 3, 9, 5, 2],
'+Col04': [3, 1, 4, 8, 0],
'+Col05': [8, 2, 9, 7, 0],
'-Col03': [1, 2, 5, 1, 2],
'-Col04': [9, 3, 1, 0, 9],
'+Col06': [4, 6, 2, 9, 2],
'-Col07': [6, 0, 0, 2, 1]
}
df = pd.DataFrame(data)
print("原始DataFrame:")
print(df)
# 2. 调整负号列的值
negative_cols = df.columns[df.columns.str.startswith('-')]
df[negative_cols] = df[negative_cols].mul(-1)
# 3. 标准化列名并进行分组求和
standardized_col_names = df.columns.str.replace('[+-]', '', regex=True)
final_df = df.groupby(standardized_col_names, axis=1, sort=False).sum()
print("\n最终归一化后的DataFrame:")
print(final_df)通过上述步骤，我们可以灵活且高效地对带有符号前缀的DataFrame列进行归一化处理，生成一个结构清晰、易于分析的新DataFrame。
以上就是规范化处理带有符号前缀的DataFrame列的详细内容，更多请关注php中文网其它相关文章！
每个人都需要一台速度更快、更稳定的 PC。随着时间的推移，垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是，许多工具可以让 Windows 保持平稳运行。
广告Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号
486
收藏
