Заставьте GIT использовать ключ SSH

$ ssh-add ~/.ssh/id_rsa
Obedient Ox