0

0

Python pre-commit.ci 的加速技巧

舞姬之光

舞姬之光

发布时间:2026-02-22 20:32:03

|

966人浏览过

|

来源于php中文网

原创

根本原因是pre-commit.ci默认为每个hook启动全新docker容器且不复用pip缓存,导致大包安装耗时30–90秒;需禁用autoupdate、显式配置cache路径、优化hook配置并合理使用stages。

python pre-commit.ci 的加速技巧

pre-commit.ci 为什么比本地 pre-commit 慢

根本原因不是网络,而是它默认为每个 hook 启动全新 Docker 容器,且不复用缓存层。本地 pre-commit run 走的是已安装的 Python 环境 + pip 缓存,而 pre-commit.ci 的每次运行都从基础镜像拉起,pip install 阶段占时最长。

  • hook 若依赖大包(如 pylintblack 24+、mypy),安装耗时可达 30–90 秒
  • 即使用了 language: system,pre-commit.ci 仍可能 fallback 到容器环境,不保证复用宿主 Python
  • 默认配置下,ci: autoupdate: true 会触发额外的 pre-commit autoupdate 步骤,进一步拖慢

用 pre-commit.ci 的 cache 声明跳过重复安装

pre-commit.ci 支持在 .pre-commit-config.yaml 里显式声明缓存路径,让 pip 安装结果跨构建复用。关键是把 ~/.cache/pip 和 hook 的 virtualenv 目录都加进缓存键。

  • .pre-commit-config.yaml 顶层加:
    ci:
      skip: []
      autoupdate: false
      # 关键:启用缓存并指定路径
      cache:
        - ~/.cache/pip
        - .pre-commit-hooks
    
  • 必须关掉 autoupdate,否则每次 PR 都会先跑一次更新,清空旧缓存
  • 如果 hook 使用 language: python,其虚拟环境默认建在 .pre-commit-hooks/ 下,缓存该目录能直接跳过 reinstall
  • 注意:缓存只对同一 repo 的后续构建生效,fork 的 PR 不共享缓存

替换 heavy hook 为轻量等效命令

有些 hook 天然重,比如 mypy 全项目检查或 pylint 启用全部插件。pre-commit.ci 上没必要全量跑,可换为只检改动文件的轻量替代。

doxygen 官方手册
doxygen 官方手册

doxygen是一款好用的程序员辅助工具,它可以让程序添加批添代码更加简单轻松,兼容C++、 C、Java、 Objective-C、Python等主流编程语言,小编提供的doxygen中文手册包含了基本介绍、语法技巧以及进阶技巧等内容,可以让你快速上手操作,有需要的欢迎下载。 基本介绍 Doxygen已经支持生成ANSI编码的chm目录文件(index.hhc)!Doxygen通常是用作生成英文文档的,生成中文文档需要修改输入和输出的码制,这样可以改变解析方式,生成中文文档。但是,你必须意识 到,Dox

下载
  • repo: https://github.com/pre-commit/mirrors-mypy 换成自定义脚本:
    - repo: local
      hooks:
        - id: mypy-changed
          name: mypy (changed files only)
          entry: sh -c 'mypy --show-error-codes $(git diff --cached --name-only | grep ".py$" | tr "\n" " ")'
          language: system
          types: [python]
    
  • 避免用 black 24+,改用 black==23.10.1 —— 新版因 AST 重构导致启动慢 2–3 倍
  • pylint 建议加 args: [--disable=all,--enable=missing-docstring,unused-argument],禁用开销大的检查项

用 pre-commit.ci 的 stages 控制执行时机

默认所有 hook 在 pushpull_request 都跑,但有些只需在合并前校验(比如严格格式检查),有些甚至可以只在 push 到 main 时跑(比如生成 changelog)。

立即学习Python免费学习笔记(深入)”;

  • 给 hook 加 stages: [commit] 只在本地 commit 触发,CI 不执行
  • 对耗时 hook(如 codespell 全量扫描),设 stages: [push],避开 PR 检查的等待
  • 若 hook 依赖 CI 特有 secret(如上传报告),用 pass_filenames: false + always_run: true 避免因无改动文件被跳过
  • 注意:stage 设置只影响 pre-commit.ci 的触发逻辑,不影响本地行为

真正卡住速度的,往往不是单个 hook 多慢,而是多个 hook 的 pip 安装叠加 + 默认全量扫描 + 未关闭 autoupdate。缓存路径写错、stage 混用、或以为加了 language: system 就一定快——这些才是实际落地时最常漏掉的点。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
pip安装使用方法
pip安装使用方法

安装步骤:1、确保Python已经正确安装在您的计算机上;2、下载“get-pip.py”脚本;3、按下Win + R键,然后输入cmd并按下Enter键来打开命令行窗口;4、在命令行窗口中,使用cd命令切换到“get-pip.py”所在的目录;5、执行安装命令;6、验证安装结果即可。大家可以访问本专题下的文章,了解pip安装使用方法的更多内容。

351

2023.10.09

更新pip版本
更新pip版本

更新pip版本方法有使用pip自身更新、使用操作系统自带的包管理工具、使用python包管理工具、手动安装最新版本。想了解更多相关的内容,请阅读专题下面的文章。

426

2024.12.20

pip设置清华源
pip设置清华源

设置方法:1、打开终端或命令提示符窗口;2、运行“touch ~/.pip/pip.conf”命令创建一个名为pip的配置文件;3、打开pip.conf文件,然后添加“[global];index-url = https://pypi.tuna.tsinghua.edu.cn/simple”内容,这将把pip的镜像源设置为清华大学的镜像源;4、保存并关闭文件即可。

789

2024.12.23

python升级pip
python升级pip

本专题整合了python升级pip相关教程,阅读下面的文章了解更多详细内容。

362

2025.07.23

github中文官网入口 github中文版官网网页进入
github中文官网入口 github中文版官网网页进入

github中文官网入口https://docs.github.com/zh/get-started,GitHub 是一种基于云的平台,可在其中存储、共享并与他人一起编写代码。 通过将代码存储在GitHub 上的“存储库”中,你可以: “展示或共享”你的工作。 持续“跟踪和管理”对代码的更改。

2708

2026.01.21

k8s和docker区别
k8s和docker区别

k8s和docker区别有抽象层次不同、管理范围不同、功能不同、应用程序生命周期管理不同、缩放能力不同、高可用性等等区别。本专题为大家提供k8s和docker区别相关的各种文章、以及下载和课程。

265

2023.07.24

docker进入容器的方法有哪些
docker进入容器的方法有哪些

docker进入容器的方法:1. Docker exec;2. Docker attach;3. Docker run --interactive --tty;4. Docker ps -a;5. 使用 Docker Compose。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

512

2024.04.08

docker容器无法访问外部网络怎么办
docker容器无法访问外部网络怎么办

docker 容器无法访问外部网络的原因和解决方法:配置 nat 端口映射以将容器端口映射到主机端口。根据主机兼容性选择正确的网络驱动(如 host 或 overlay)。允许容器端口通过主机的防火墙。配置容器的正确 dns 服务器。选择正确的容器网络模式。排除主机网络问题,如防火墙或连接问题。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

411

2024.04.08

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

1030

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.4万人学习

Django 教程
Django 教程

共28课时 | 4.5万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号