0

0

Pandas 中基于数字集合实现姓名组间匹配的完整教程

心靈之曲

心靈之曲

发布时间:2026-02-26 09:51:01

|

478人浏览过

|

来源于php中文网

原创

Pandas 中基于数字集合实现姓名组间匹配的完整教程

本文介绍如何在 Pandas 中对两组带编号集合的姓名(name_b/number_b 与 name_s/number_s)进行跨表匹配,通过 explode() 展开集合、merge() 关联数字键,高效生成所有可能的配对结果。

本文介绍如何在 pandas 中对两组带编号集合的姓名(`name_b`/`number_b` 与 `name_s`/`number_s`)进行跨表匹配,通过 `explode()` 展开集合、`merge()` 关联数字键,高效生成所有可能的配对结果。

在实际数据清洗与实体对齐任务中,常遇到类似场景:一个数据源中每条记录包含一个主体名称(如 name_b)及其关联的编号集合(如 {1, 2, 3}),另一数据源则提供候选匹配名称(name_s)及对应编号集合(number_s)。目标并非全集匹配,而是找出所有「编号重叠」驱动的姓名组合——即只要某个数字同时出现在 number_b 和 number_s 中,就构成一条有效匹配记录。

核心思路是将“集合→行”的结构转换为“一对一”关系,再以数字为桥梁进行合并。Pandas 的 explode() 方法正是为此而生:它能将包含可迭代对象(如 set、list、tuple)的列逐元素展开为多行,完美适配此类嵌套结构。

以下为完整实现步骤(假设原始 DataFrame 名为 df,且 number_b / number_s 列存储的是 Python set 对象):

Baklib
Baklib

在线创建产品手册、知识库、帮助文档

下载
import pandas as pd

# 步骤1:处理 name_b 侧 → 提取 Entity、name_b,并展开 number_b
df_b = (
    df[["Entity", "name_b", "number_b"]]
    .explode("number_b")      # 将每个 set 展开为独立行
    .dropna(subset=["number_b"])  # 过滤 number_b 为空或 NaN 的行
    .rename(columns={"number_b": "number"})
)

# 步骤2:处理 name_s 侧 → 仅需 name_s 和 number_s,同样 explode
df_s = (
    df[["name_s", "number_s"]]
    .explode("number_s")
    .dropna(subset=["number_s"])
    .rename(columns={"number_s": "number"})
)

# 步骤3:以 'number' 为键进行外连接(保留所有编号组合,含无匹配项)
result = pd.merge(df_b, df_s, on="number", how="outer")

# 可选:按 Entity 和 number 排序,提升可读性
result = result.sort_values(["Entity", "number"]).reset_index(drop=True)

运行后将得到符合预期的宽匹配表——每行代表一个由共享数字支撑的 (name_b, name_s) 配对。例如 Zyla 与 Zeela 因共享数字 1、2、3 而分别生成三条记录;GCP Zyla 因 number_b={4,7} 在 number_s 中无对应值,故 name_s 显示为 NaN(即输出中的 -)。

⚠️ 关键注意事项

  • 数据类型一致性:确保 number_b 和 number_s 列确为 set(或 list/tuple),若为字符串(如 "{1, 2, 3}"),需先用 ast.literal_eval 解析;
  • 空值处理:explode() 对 None 或空集合返回 NaN 行,务必用 dropna(subset=[...]) 清理,避免无效匹配;
  • 性能提示:若集合极大(如单个 set 含数千元素),explode() 可能显著增加内存占用,建议提前评估基数或分块处理;
  • 匹配语义:当前为“任意数字交集即匹配”,如需“全部数字一致”或“最小交集阈值”,需改用自定义函数 + apply(),而非 merge。

该方法简洁、向量化、易扩展,是 Pandas 处理集合型关联问题的标准范式。掌握 explode + merge 组合技,可快速应对命名标准化、ID 映射、多标签对齐等典型数据工程挑战。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

76

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

9

2026.01.31

数据类型有哪几种
数据类型有哪几种

数据类型有整型、浮点型、字符型、字符串型、布尔型、数组、结构体和枚举等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

311

2023.10.31

php数据类型
php数据类型

本专题整合了php数据类型相关内容,阅读专题下面的文章了解更多详细内容。

223

2025.10.31

c语言 数据类型
c语言 数据类型

本专题整合了c语言数据类型相关内容,阅读专题下面的文章了解更多详细内容。

97

2026.02.12

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

638

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

218

2023.09.04

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

1560

2023.10.24

batoto漫画官网入口与网页版访问指南
batoto漫画官网入口与网页版访问指南

本专题系统整理batoto漫画官方网站最新可用入口,涵盖最新官网地址、网页版登录页面及防走失访问方式说明,帮助用户快速找到batoto漫画官方平台,稳定在线阅读各类漫画内容。

320

2026.02.25

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号