Aqui eu segui um tutorial bem simples (válido para Ubuntu e derivados):

1. Adicionar o PPA mantido pelo time mantenedor do Git: sudo add-apt-repository ppa:git-core/ppa
2. Executar o comando: sudo apt update && sudo apt install git
3. Pronto, versão 2.39.1 instalada!