0

0

如何解决 Airflow 中的 DeprecationWarning 警告

碧海醫心

碧海醫心

发布时间:2025-12-30 19:54:09

|

990人浏览过

|

来源于php中文网

原创

如何解决 Airflow 中的 DeprecationWarning 警告

本文详解如何消除 airflow cli 运行时出现的 kubernetes 配置项弃用警告(deprecationwarning),核心是将 airflow.cfg 中已迁移的配置节从 `[kubernetes]` 正确更新为 `[kubernetes_executor]`。

Airflow 自 2.0 版本起逐步重构 Kubernetes 相关配置结构,原属于 [kubernetes] 配置节下的 namespace 等关键参数(如 namespace、worker_container_repository、worker_container_tag 等)已被正式迁移至独立的 [kubernetes_executor] 节。若 airflow.cfg 中仍保留旧配置节,Airflow 会在启动或执行 CLI 命令(如 airflow info、airflow db migrate)时触发如下警告:

DeprecationWarning: The namespace option in [kubernetes] has been moved to the namespace option in [kubernetes_executor] - the old setting has been used, but please update your config.

该警告虽不影响功能运行,但会干扰日志可读性,并可能在后续版本中升级为错误。

解决步骤如下:

  1. 定位并打开 airflow.cfg 文件
    通常位于 $AIRFLOW_HOME/airflow.cfg(默认为 ~/airflow/airflow.cfg)。可通过以下命令确认路径:

    airflow config get-value core airflow_home
  2. 查找并迁移配置节
    使用文本编辑器搜索 [kubernetes] 配置节(常见于文件约第 1086 行附近),将其整体重命名为 [kubernetes_executor]。例如:

    ❌ 旧配置(触发警告):

    Mistral AI
    Mistral AI

    Mistral AI被称为“欧洲版的OpenAI”,也是目前欧洲最强的 LLM 大模型平台

    下载
    [kubernetes]
    namespace = default
    worker_container_repository = apache/airflow
    worker_container_tag = 2.9.0

    ✅ 新配置(推荐写法):

    [kubernetes_executor]
    namespace = default
    worker_container_repository = apache/airflow
    worker_container_tag = 2.9.0
  3. 删除或注释旧节(重要!)
    若同时存在 [kubernetes] 和 [kubernetes_executor] 两个节,Airflow 会优先读取旧节并继续报警告。请确保旧 [kubernetes] 节完全移除或注释掉(如加 # 前缀),避免冲突。

  4. 验证修复效果
    重启 Airflow(如需)后执行任意 CLI 命令,警告应不再出现:

    airflow info | head -n 10

⚠️ 注意事项:

  • 修改 airflow.cfg 后,需确保所有 Airflow 组件(Webserver、Scheduler、Workers)均使用更新后的配置;若使用容器部署,请同步更新配置挂载或环境变量注入逻辑。
  • 若通过环境变量(如 AIRFLOW__KUBERNETES__NAMESPACE)设置参数,也需同步改为 AIRFLOW__KUBERNETES_EXECUTOR__NAMESPACE。
  • 推荐参考 Airflow 官方配置文档 获取最新支持参数列表。

完成上述迁移后,DeprecationWarning 将彻底消失,配置更符合当前版本规范,也为未来升级铺平道路。

相关专题

更多
Golang云原生微服务Kubernetes_Golang怎么集成Kubernetes开发云原生服务
Golang云原生微服务Kubernetes_Golang怎么集成Kubernetes开发云原生服务

Golang云原生微服务Kubernetes (K8s) 是指 使用 Go 语言(Golang)编写的云原生微服务,并利用 Kubernetes 平台进行容器化部署、自动化管理、弹性伸缩和高效编排的一整套现代应用架构方案。

24

2025.12.22

高德地图升级方法汇总
高德地图升级方法汇总

本专题整合了高德地图升级相关教程,阅读专题下面的文章了解更多详细内容。

42

2026.01.16

全民K歌得高分教程大全
全民K歌得高分教程大全

本专题整合了全民K歌得高分技巧汇总,阅读专题下面的文章了解更多详细内容。

74

2026.01.16

C++ 单元测试与代码质量保障
C++ 单元测试与代码质量保障

本专题系统讲解 C++ 在单元测试与代码质量保障方面的实战方法,包括测试驱动开发理念、Google Test/Google Mock 的使用、测试用例设计、边界条件验证、持续集成中的自动化测试流程,以及常见代码质量问题的发现与修复。通过工程化示例,帮助开发者建立 可测试、可维护、高质量的 C++ 项目体系。

23

2026.01.16

java数据库连接教程大全
java数据库连接教程大全

本专题整合了java数据库连接相关教程,阅读专题下面的文章了解更多详细内容。

35

2026.01.15

Java音频处理教程汇总
Java音频处理教程汇总

本专题整合了java音频处理教程大全,阅读专题下面的文章了解更多详细内容。

16

2026.01.15

windows查看wifi密码教程大全
windows查看wifi密码教程大全

本专题整合了windows查看wifi密码教程大全,阅读专题下面的文章了解更多详细内容。

56

2026.01.15

浏览器缓存清理方法汇总
浏览器缓存清理方法汇总

本专题整合了浏览器缓存清理教程汇总,阅读专题下面的文章了解更多详细内容。

15

2026.01.15

ps图片相关教程汇总
ps图片相关教程汇总

本专题整合了ps图片设置相关教程合集,阅读专题下面的文章了解更多详细内容。

9

2026.01.15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
RunnerGo从入门到精通
RunnerGo从入门到精通

共22课时 | 1.7万人学习

尚学堂Mahout视频教程
尚学堂Mahout视频教程

共18课时 | 3.2万人学习

Linux优化视频教程
Linux优化视频教程

共14课时 | 3.1万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号