Descartar todos los otros archivos que no he agregado

[xxkyushuxx]

Hola a todos, soy nuevo en git y quería hacer una consulta:

Tengo una carpeta en mi escritorio, vinculador con un repositorio remoto.
Dicha carpeta tiene como 60 archivos, pero yo solo he agregado a git 5 archivos, dado que solo esos archivos son los que yo quiero controlar sus versiones.

Cada vez que hago git status, me dice que debo de agregar todos los archivos, pero bueno yo no quiero. Habría alguna manera solo añadir los 5 y descartar los restante, para que no me esté pidiendo a cada rato que añada los archivos restantes.

Espero puedan ayudarme, gracias.