Pues yo veo algo bastante normal, el uso de cache es bastante grande pero eso puede deberse a algún programa que esté corriendo por mucho tiempo con pérdida de memoria (memory leak). El uso "real" de tu sistema es 302MB, normal.
Ejecuta esto como root para eliminar el cache del SO:
Código:
echo 3 > /proc/sys/vm/drop_caches
saludos.