0

0

使用 attrs 和 cattrs 处理嵌套列表数据结构的最佳实践

碧海醫心

碧海醫心

发布时间:2025-08-05 23:22:01

|

231人浏览过

|

来源于php中文网

原创

使用 attrs 和 cattrs 处理嵌套列表数据结构的最佳实践

本文探讨了如何利用 Python 的 attrs 库优雅地处理包含嵌套列表的复杂数据结构。针对将字典列表转换为 attrs 类实例列表的常见场景,文章阐述了直接使用 converter 参数的局限性,并推荐使用 cattrs 库的 structure 函数。通过实例代码,教程展示了 cattrs 如何自动化地将原始字典数据解构并映射到 attrs 定义的类层级中,从而实现更简洁、健壮的数据转换。

attrs 简介与嵌套数据挑战

attrs 是一个强大的 python 库,用于声明式地定义数据类,它通过装饰器 @define 简化了类的创建,并自动生成 __init__, __repr__, __eq__ 等方法。这使得数据模型定义变得非常简洁和易读。

在实际应用中,我们经常会遇到需要处理嵌套数据结构的情况,例如一个主对象包含一个列表,而列表中的每个元素又是一个复杂的对象。当这些数据最初以字典或 JSON 格式存在时,如何高效且优雅地将其转换为 attrs 定义的类实例,特别是包含列表的场景,是一个常见的挑战。

考虑以下场景:我们有一组角色数据,每个角色包含 first_name 和 last_name。这些角色被组织在一个名为 characters 的列表中,并且整个结构是一个字典。

data = {
    "characters": [
        {"first_name": "Duffy", "last_name": "Duck"},
        {"first_name": "Bugs", "last_name": "Bunny"},
        {"first_name": "Sylvester", "last_name": "Pussycat"},
        {"first_name": "Elmar", "last_name": "Fudd"},
        {"first_name": "Tweety", "last_name": "Bird"},
        {"first_name": "Sam", "last_name": "Yosemite"},
        {"first_name": "Wile E.", "last_name": "Coyote"},
        {"first_name": "Road", "last_name": "Runner"},
    ]
}

我们希望将其映射到以下 attrs 类结构中:

from attrs import define, field
from typing import List

@define(kw_only=True)
class Character:
    first_name: str
    last_name: str

@define
class LooneyToons:
    characters: List[Character]

一个直观但错误的尝试是为 LooneyToons 类中的 characters 字段使用 converter 参数,并将其设置为 Character 类本身:

# 错误的示例,会导致 TypeError
@define
class LooneyToons_Incorrect:
    characters: List[Character] = field(factory=list, converter=Character)

当尝试将 data['characters'](一个字典列表)传递给 LooneyToons_Incorrect 时,会遇到 TypeError: Character.__init__() takes 1 positional argument but 2 were given。这是因为 converter 参数期望接收列表中的每个单独元素,并将其转换为 Character 实例。然而,我们传递给 LooneyToons_Incorrect 构造函数的是整个字典列表,attrs 尝试将整个列表作为单个参数传递给 Character 的 __init__ 方法,这显然是不匹配的。

cattrs:优雅的解决方案

为了解决这种嵌套数据转换的复杂性,cattrs 库应运而生。cattrs 是 attrs 的一个辅助库,专门用于在 Python 对象和各种数据格式(如字典、JSON)之间进行结构化转换(structuring 和 unstructuring)。它能够智能地处理复杂的嵌套结构,包括列表、字典和自定义 attrs 类。

Meituan CatPaw
Meituan CatPaw

美团推出的智能AI编程Agent

下载

使用 cattrs,我们可以非常简洁地将上述字典数据转换为我们定义的 attrs 类实例。

from typing import List
from attrs import define, field
from cattrs import structure

# 原始数据
data = {
    "characters": [
        {"first_name": "Duffy", "last_name": "Duck"},
        {"first_name": "Bugs", "last_name": "Bunny"},
        {"first_name": "Sylvester", "last_name": "Pussycat"},
        {"first_name": "Elmar", "last_name": "Fudd"},
        {"first_name": "Tweety", "last_name": "Bird"},
        {"first_name": "Sam", "last_name": "Yosemite"},
        {"first_name": "Wile E.", "last_name": "Coyote"},
        {"first_name": "Road", "last_name": "Runner"},
    ]
}

# 定义 Character 类
@define(kw_only=True)
class Character:
    first_name: str
    last_name: str

# 定义 LooneyToons 类,characters 字段无需 converter
@define
class LooneyToons:
    characters: List[Character] = field(factory=list) # factory=list 确保默认值是一个空列表

# 使用 cattrs.structure 进行转换
looney_tunes_instance = structure(data, LooneyToons)

# 验证结果
print(looney_tunes_instance)
print(looney_tunes_instance.characters[0])
print(isinstance(looney_tunes_instance.characters[0], Character))

输出示例:

LooneyToons(characters=[Character(first_name='Duffy', last_name='Duck'), Character(first_name='Bugs', last_name='Bunny'), Character(first_name='Sylvester', last_name='Pussycat'), Character(first_name='Elmar', last_name='Fudd'), Character(first_name='Tweety', last_name='Bird'), Character(first_name='Sam', last_name='Yosemite'), Character(first_name='Wile E.', last_name='Coyote'), Character(first_name='Road', last_name='Runner')])
Character(first_name='Duffy', last_name='Duck')
True

通过 cattrs.structure(data, LooneyToons),cattrs 会自动检测 LooneyToons 类中的 characters 字段类型是 List[Character]。它会遍历 data['characters'] 中的每一个字典,并智能地将每个字典解构为 Character 类的一个实例。这种方式极大地简化了复杂数据结构的映射过程,避免了手动循环和构造实例。

注意事项与总结

  1. 何时使用 converter? attrs 字段的 converter 参数适用于对单个传入值进行转换。例如,如果 Character 类中的 first_name 字段可能接收数字,你需要将其转换为字符串,那么可以在 first_name 字段上设置 converter=str。但对于将整个列表的字典转换为列表的 attrs 实例,converter 并不适用。
  2. cattrs 的强大之处: cattrs 不仅仅处理列表,它还能处理更复杂的嵌套结构,例如字典中的 attrs 类、以及自定义的转换规则。它提供了一个灵活且可扩展的框架来处理数据序列化和反序列化。
  3. 类型提示的重要性: 在使用 attrs 和 cattrs 时,清晰准确的类型提示(如 List[Character])至关重要。cattrs 依赖这些类型信息来正确地进行数据结构化。
  4. 安装 cattrs: 如果尚未安装 cattrs,可以使用 pip install cattrs 命令进行安装。

总而言之,当处理涉及 attrs 类和嵌套列表(尤其是从字典数据转换而来)的复杂数据结构时,cattrs 库的 structure 函数是首选的解决方案。它提供了一种声明式、类型安全且高度自动化的方式来完成数据映射,使得代码更加简洁、健壮和易于维护。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

777

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

684

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

768

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

739

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1445

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

571

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

579

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

751

2023.08.11

c++ 根号
c++ 根号

本专题整合了c++根号相关教程,阅读专题下面的文章了解更多详细内容。

58

2026.01.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 19.8万人学习

Django 教程
Django 教程

共28课时 | 3.5万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号