Averiguas los ficheros que hay en dicho directorio,
averiguas el peso de cada uno y lo vas sumando. Si dentro de ese directorio existen subdirectorios, deberias usar una funcion recursiva.
o
podés leer los comentarios de la entrada de filesize del manual de php donde seguro encontrarás una funcion que haga todo esto.
Saludos..