yo pondría en el header las direcciones absolutas, por ejemplo si en el header llamo a un css que esta en mi carpeta css y se llama misEstilos.css pondría
http://www.midominio.com/css/misEstilos.css
Así cuando inserte el header en cualquier documento siempre lo encontrará