Hola, claro que hay maneras de solucionar eso.
Todo lo que debes hacer es ir al archivo gitignore, y es allí
donde debes incluir aquellas carpetas o archivos que necesitas ignorar para subir a tu repositorio.
Aquí te dejo esta ayuda para que lo veas mejor:
https://codeday.me/es/qa/20181209/11019.html
Saludos...