Simplemente el SO va a aprovechar al máximo la RAM, no sirve de nada tener la RAM vacía.
Supón el caso de que entras en una web y carga 20 imágenes, cuando te vas de la web en vez de descargarlas de la RAM las deja ahí por si en un futuro vuelves tenerlas ya cargadas.
Lógicamente, cuando vea que necesita RAM pues irá descargando cosas antiguas, pero mientras tanto no, porque, entre otras cosas, el hecho de descargar la RAM tiene un consumo.