Разрешения слишком открыты.

chmod 600 ~/.ssh/id_rsa
garzj