nvidia-smi시 Failed to initialize NVML: Driver/library version mismatch 오류 발생 조치 방법

Nvidia GPU를 이용한 딥러닝 연구시 간혹가다 서버에서 gpu를 못잡고 재기동이 필요한 경우가 있다.

그런데 서버 재기동이 번거러운 환경에서 매번 재기동을 하는 경우 불편함이 있어 재기동 없이 조치하는 방법을 기록으로 남긴다.

 

os : Ubuntu 20

 

증상 : nvidia-smi시  아래와 같은 오류 발생

Failed to initialize NVML: Driver/library version mismatch
NVML library version: 535.104 

 

적용 커맨드

• 오류 모듈 재설치
  1. sudo apt --fix-broken install
• nvidia 관련 모둘 재기동
  1. lsmod | grep nvidia
  2. sudo rmmod nvidia_drm
  3. sudo rmmod nvidia_modeset
  4. sudo rmmod nvidia_uvm
  5. sudo rmmod nvidia
  6. sudo modprobe nvidia
• 정상 작동확인
  1. nvidia-smi

 

오류 발생시 관련 화면 캡처를 못해 커맨드 명령어만 남긴다.