Снимите папку из репо, но держите локально

git rm -r --cached File-or-FolderName
git commit -m "Removed folder from repository"
git push origin master
The Rambling Lank