Nvidia 显卡 Failed to initialize NVML Driver/library version mismatch 错误解决方案

问题复现

在运行 nvidia-smi 命令时，出现以下错误信息：

$ nvidia-smi --> Failed to initialize NVML: Driver/library version mismatch

问题分析

此错误表明 NVIDIA 内核驱动版本与系统驱动不匹配。具体原因是显卡驱动所使用的内核版本与系统内核版本不一致。

查看显卡驱动所使用的内核版本：

cat /proc/driver/nvidia/version
--> NVRM version: NVIDIA UNIX x86_64 Kernel Module  430.34  Wed Jun 26 12:19:48 CDT 2019
    GCC version:  gcc version 5.4.0 20160609 (Ubuntu 5.4.0-6ubuntu1~16.04.12)

可以看到，内核版本（Kernel Module）为 430.34，系统内核版本为 16.04.12。

查看系统驱动日志：

cat /var/log/dpkg.log | grep nvidia
--> 2021-03-30 14:04:55 install libnvidia-compute-460-server:amd64  460.32.03-0ubuntu0.18.04.2
    2021-03-30 14:04:55 status half-installed libnvidia-compute-460-server:amd64 460.32.03-0ubuntu0.18.04.2
    2021-03-30 14:04:57 status unpacked libnvidia-compute-460-server:amd64 460.32.03-0ubuntu0.18.04.2
    2021-03-30 14:04:57 status unpacked libnvidia-compute-460-server:amd64 460.32.03-0ubuntu0.18.04.2
    2021-03-30 14:05:15 install nvidia-cuda-dev:amd64  9.1.85-3ubuntu1
    2021-03-30 14:05:15 status half-installed nvidia-cuda-dev:amd64 9.1.85-3ubuntu1
    2021-03-30 14:05:34 status unpacked nvidia-cuda-dev:amd64 9.1.85-3ubuntu1
    2021-03-30 14:05:34 status unpacked nvidia-cuda-dev:amd64 9.1.85-3ubuntu1
    2021-03-30 14:05:34 install nvidia-cuda-doc:all  9.1.85-3ubuntu1
    2021-03-30 14:05:34 status half-installed nvidia-cuda-doc:all 9.1.85-3ubuntu1
    2021-03-30 14:05:38 status unpacked nvidia-cuda-doc:all 9.1.85-3ubuntu1
    2021-03-30 14:05:38 status unpacked nvidia-cuda-doc:all 9.1.85-3ubuntu1
    2021-03-30 14:05:38 install nvidia-cuda-gdb:amd64  9.1.85-3ubuntu1
    2021-03-30 14:05:38 status half-installed nvidia-cuda-gdb:amd64 9.1.85-3ubuntu1
    2021-03-30 14:05:39 status unpacked nvidia-cuda-gdb:amd64 9.1.85-3ubuntu1
    2021-03-30 14:05:39 status unpacked nvidia-cuda-gdb:amd64 9.1.85-3ubuntu1
    2021-03-30 14:05:39 install nvidia-profiler:amd64  9.1.85-3ubuntu1
    2021-03-30 14:05:39 status half-installed nvidia-profiler:amd64 9.1.85-3ubuntu1

从日志中可以看到，系统曾经安装过 Ubuntu 18.04 内核下的 NVIDIA 460.32 驱动。

查看当前安装的驱动程序：

sudo dpkg --list | grep nvidia-*
--> ii  libnvidia-compute-460-server:amd64   460.32.03-0ubuntu0.18.04.2                 amd64        NVIDIA libcompute package
    ii  libnvidia-container-tools            1.0.5-1                                    amd64        NVIDIA container runtime library (command-line tools)
    ii  libnvidia-container1:amd64           1.0.5-1                                    amd64        NVIDIA container runtime library
    ii  nvidia-container-runtime             3.1.4-1                                    amd64        NVIDIA container runtime
    ii  nvidia-container-toolkit             1.0.5-1                                    amd64        NVIDIA container runtime hook
    ii  nvidia-cuda-dev                      9.1.85-3ubuntu1                            amd64        NVIDIA CUDA development files
    ii  nvidia-cuda-doc                      9.1.85-3ubuntu1                            all          NVIDIA CUDA and OpenCL documentation

可以看到，系统当前安装了 Ubuntu 18.04 内核下的 NVIDIA 460 驱动，而实际系统内核版本与驱动需求的版本不一致，这是问题产生的根源。

Giiso写作机器人

Giiso写作机器人，让写作更简单

下载

解决方案

卸载现有驱动，并重新安装与系统内核版本匹配的驱动。

卸载驱动：

sudo /usr/bin/nvidia-uninstall
sudo apt-get --purge remove nvidia-*
sudo apt-get purge nvidia*
sudo apt-get purge libnvidia*

直到命令不输出任何内容，确保所有 NVIDIA 相关驱动都被卸载：

sudo dpkg --list | grep nvidia-*

重新安装驱动：

sudo chmod a+x NVIDIA-Linux-x86_64-450.80.02.run
sudo ./NVIDIA-Linux-x86_64-450.80.02.run -no-x-check -no-nouveau-check -no-opengl-files

查看驱动更新结果：

$ nvidia-smi

参考资料

• https://www.php.cn/link/c90999c746b9da1fed1b84fc73bdcb70
• https://www.php.cn/link/af075e90875e107a1963c799eb861a61