Hombre yo a lo que me refiero es que bajo Ubuntu por defecto, aparte de que te carga las X y chupa mas recursos, se actualiza con paquetes mas nuevos que no estan tan probados, no he hablado del tiempo de respuesta a un fallo de seguridad, y gentoo, aunque no lo he probado, parece una solucion idonea a tu problema.