Lo que entiendo, no es que cargue más el procesador (puede ser), es que hay elementos que no requieren los estilos indicadas y el * asigna a todos los elementos el estilo que estoy indicando. Lo mejor es especificar que corresponde a que elemento, ejemplo lean
este articulo específicamente
este comentario.