0

0

Python文件锁教程_并发写入安全实践

冷炫風刃

冷炫風刃

发布时间:2026-01-12 18:40:03

|

566人浏览过

|

来源于php中文网

原创

Python文件锁需用flock或portalocker等系统级机制,因open()和with不提供并发保护,多进程写入会导致覆盖或错乱;推荐portalocker跨平台加锁,或用临时文件+os.replace实现原子写入。

python文件锁教程_并发写入安全实践

Python中实现文件锁,核心是避免多个进程或线程同时写入同一文件导致数据错乱、覆盖或损坏。单线程内用普通变量或 threading.Lock 即可,但跨进程必须依赖操作系统级的锁机制,比如 flock(Unix/Linux/macOS)或 msvcrt.locking(Windows),更通用稳妥的做法是使用第三方库 portalocker 或标准库中的 threading.Lock + 进程间协调(如文件信号量)。

为什么不能只靠 open() 和 with 语句?

with open(..., 'w') 只保证当前 Python 对象在作用域内不被意外关闭,完全不提供任何并发保护。两个进程同时执行该语句,会各自打开文件并写入,后写入者大概率覆盖前者的全部内容——尤其当写入非原子(比如分多次 write())时,还可能出现内容交错、截断、乱码等现象。

推荐方案:用 portalocker 实现跨平台文件锁

portalocker 封装了底层系统调用,自动适配不同操作系统,API 简洁可靠,是生产环境首选。

  • 安装:pip install portalocker
  • 基本写入加锁示例:

易语言入门教程 CHM版
易语言入门教程 CHM版

易语言入门教程 CHM,介绍易语言的系统基本数据类型、常量表、运算符、位运算命令以及易语言支持库方面的问题,易语言所编写的程序运行时都需要加载易语言的支持库文件.表面上易语言的非独立编译所生成的EXE程序体积小巧.但事实上若想把软件发布出去给别人的电脑上使用.非独立编译将面临很多的问题.所以实际应用时应全部进行独立编译。

下载

立即学习Python免费学习笔记(深入)”;

import portalocker
import json
<p>def safe_write_json(filepath, data):
with open(filepath, 'w') as f:</p><h1>排他锁(LOCK_EX),阻塞直到获得锁</h1><pre class="brush:php;toolbar:false;">    portalocker.lock(f, portalocker.LOCK_EX)
    try:
        json.dump(data, f)
        f.flush()  # 确保内容真正写入磁盘
    finally:
        portalocker.unlock(f)  # 显式解锁更安全

立即学习Python免费学习笔记(深入)”;

进阶注意点:锁的粒度与生命周期

文件锁绑定在「文件描述符」上,不是文件路径。这意味着:

  • 同一个进程内重复 open 同一路径 → 得到不同 fd → 需分别加锁;
  • fork 子进程会继承父进程的 fd 和锁状态,子进程退出可能自动释放锁(行为因系统而异);
  • 程序崩溃未 unlock?多数系统会在 fd 关闭时自动释放,但为防万一,建议配合 try/finally 或上下文管理器(portalocker.Lock 类已支持);
  • 若只需防止并发写入,读操作通常无需加锁(除非你要求“读时文件不能被改”)。

替代方案对比:flock vs. 临时文件原子重命名

对于日志类追加写入,flock 足够;但对需要「全量替换」的场景(如保存配置、缓存),更健壮的做法是:

  • 写入临时文件(如 config.json.tmp);
  • 调用 os.replace()(Python 3.3+,原子性跨平台)重命名为目标名;
  • 即使无锁,也能避免写到一半被读取到脏数据。

这种方式本质是用「原子重命名」代替「文件锁」,适合写一次读多次、不要求实时强一致的场景。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

452

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

546

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

327

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

81

2025.09.10

pip安装使用方法
pip安装使用方法

安装步骤:1、确保Python已经正确安装在您的计算机上;2、下载“get-pip.py”脚本;3、按下Win + R键,然后输入cmd并按下Enter键来打开命令行窗口;4、在命令行窗口中,使用cd命令切换到“get-pip.py”所在的目录;5、执行安装命令;6、验证安装结果即可。大家可以访问本专题下的文章,了解pip安装使用方法的更多内容。

373

2023.10.09

更新pip版本
更新pip版本

更新pip版本方法有使用pip自身更新、使用操作系统自带的包管理工具、使用python包管理工具、手动安装最新版本。想了解更多相关的内容,请阅读专题下面的文章。

430

2024.12.20

pip设置清华源
pip设置清华源

设置方法:1、打开终端或命令提示符窗口;2、运行“touch ~/.pip/pip.conf”命令创建一个名为pip的配置文件;3、打开pip.conf文件,然后添加“[global];index-url = https://pypi.tuna.tsinghua.edu.cn/simple”内容,这将把pip的镜像源设置为清华大学的镜像源;4、保存并关闭文件即可。

793

2024.12.23

python升级pip
python升级pip

本专题整合了python升级pip相关教程,阅读下面的文章了解更多详细内容。

369

2025.07.23

Swift iOS架构设计与MVVM模式实战
Swift iOS架构设计与MVVM模式实战

本专题聚焦 Swift 在 iOS 应用架构设计中的实践,系统讲解 MVVM 模式的核心思想、数据绑定机制、模块拆分策略以及组件化开发方法。内容涵盖网络层封装、状态管理、依赖注入与性能优化技巧。通过完整项目案例,帮助开发者构建结构清晰、可维护性强的 iOS 应用架构体系。

0

2026.03.03

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 10万人学习

Git 教程
Git 教程

共21课时 | 4万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号