sudo apt purge nvidia*

sudo apt install --install-recommends linux-generic

재부팅후 grub 메뉴에서 고급 선택후 kernel 5.4 적혀 있는걸로 재부팅한후

콘솔창에서 밑에 명령을 실행후
sudo apt remove --purge linux-generic-hwe-20.04 linux-hwe-* linux-modules-5.11* linux-modules-extra-5.11*
밑에 명령을 실행
sudo ubuntu-drivers autoinstall
재부팅후 정상동작이 된다

출처 https://askubuntu.com/questions/1365631/nvidia-340-driver-on-ubuntu-20-04