Me autocontesto con un buen tutorial que acabo de encontrar, el cual explica realmente bien las distintas opciones de hacer las urls mas "amigables" (que por lo visto, así se le dice a la duda que yo planteaba)
Está en:
http://www.tufuncion.com/urls_amigables