0

0

Python函数缓存设计思路_手写缓存装饰器实现【教程】

冷漠man

冷漠man

发布时间:2025-12-25 21:47:02

|

117人浏览过

|

来源于php中文网

原创

手写缓存装饰器旨在理解lru_cache失效边界、参数可哈希要求及真实陷阱;需安全生成键(标准化kwargs为排序tuple、避免id/hash)、用哨兵对象判命中、并发用双重检查+锁、ttl简单实现但不内置lru。

python函数缓存设计思路_手写缓存装饰器实现【教程】

手写缓存装饰器不是为了替代 @functools.lru_cache,而是为了理解它在什么边界下会失效、为什么参数必须可哈希、以及如何应对真实场景里的常见陷阱。

缓存键怎么生成才安全?

直接用 argskwargs 的原始值做键,会遇到两类问题:不可哈希类型(如 dictlist)报 TypeError;浮点数精度或对象身份混淆导致重复计算。

  • 推荐先标准化输入:把 kwargs 转成按 key 排序的 tuple,args 保持原样但要求所有元素可哈希
  • 对不可哈希类型(如配置字典),应显式转成 json.dumps(conf, sort_keys=True)tuple(sorted(conf.items()))
  • 避免用 id()object.__hash__()——它们反映的是内存地址,不是逻辑等价性

为什么不能直接缓存返回值为 None 或 NaN?

很多手写实现用 cache_dict.get(key) is not None 判断命中,这会让 None0False、空字符串甚至 float('nan') 全部被误判为“未命中”。

  • 正确做法是用哨兵对象,比如 _cache_missing = object(),然后查 cache_dict.get(key, _cache_missing) is not _cache_missing
  • 如果函数本身可能返回 NaN,需额外用 math.isnan() 单独判断,不能依赖 ==is

并发环境下缓存读写怎么不丢数据?

多个线程/协程同时调用同一函数,且缓存未命中时,若不做控制,会重复执行原函数并覆盖彼此结果。

有道智云AI开放平台
有道智云AI开放平台

有道智云AI开放平台

下载

立即学习Python免费学习笔记(深入)”;

  • 最轻量解法:用 threading.Lock 包裹整个“查缓存 → 执行 → 写缓存”流程,但会串行化调用,影响吞吐
  • 更优方案是“双重检查 + 锁”,即先查一次,没命中再加锁,再查一次(防止锁期间已被其他线程写入),再执行
  • 异步场景下不能用 threading.Lock,得换 asyncio.Lock,且注意装饰器本身要支持 async def 函数

缓存要不要支持过期和清理?

纯内存缓存默认永不过期,但实际中常需要 TTL 或按条件淘汰。手写时别硬塞复杂策略,优先满足明确需求:

  • 简单 TTL:存值时附带 time.time() 时间戳,每次读取前检查是否超时,超时则删键并重新计算
  • 不建议在装饰器里内置 LRU 驱逐逻辑——那等于重造 lru_cache,容易出 bug;真有容量限制,直接用 maxsize=128 参数更可靠
  • 清理接口要暴露出来,比如返回一个 clear() 方法绑定到被装饰函数上,而不是藏在闭包里无法调用
def cache_with_ttl(ttl=60):
    def decorator(func):
        cache = {}
        def wrapper(*args, **kwargs):
            key = (args, tuple(sorted(kwargs.items())))
            now = time.time()
            if key in cache:
                result, timestamp = cache[key]
                if now - timestamp < ttl:
                    return result
                else:
                    del cache[key]
            result = func(*args, **kwargs)
            cache[key] = (result, now)
            return result
        wrapper.clear = lambda: cache.clear()
        return wrapper
    return decorator

真正难的从来不是“怎么存”,而是“什么时候不该存”——比如函数依赖全局状态、有副作用、或输入本身带时间戳,这些地方加缓存反而引入隐晦 bug。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

455

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

546

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

334

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

82

2025.09.10

css中float用法
css中float用法

css中float属性允许元素脱离文档流并沿其父元素边缘排列,用于创建并排列、对齐文本图像、浮动菜单边栏和重叠元素。想了解更多float的相关内容,可以阅读本专题下面的文章。

595

2024.04.28

C++中int、float和double的区别
C++中int、float和double的区别

本专题整合了c++中int和double的区别,阅读专题下面的文章了解更多详细内容。

106

2025.10.23

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

760

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

221

2023.09.04

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

3

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.5万人学习

Django 教程
Django 教程

共28课时 | 4.9万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号