La pregunta es, seguro que lo instalaste??, no se porque extraña razon las X no son prerequisito para todos los entornos graficos (de xfce no lo es) por lo que quiza no lo pusiste (yo me lo dejaba siempre).
Para reconfigurar es por consola y como root:
#dpkg-reconfigure nombredelpaquete
No se cual pone debian ahora, si es xorg como ubuntu el nombre del paquete sera xserver-xorg, sino no lo se, puedes buscarlo con el siguiente comando:
$apt-cache search loquequierasbuscar
Prueba con x.org, xorg, o xfree, alguno seguro que saldra.
Aunque tambien puede ser simplemente que no lo arranques por defecto, si poniendo startx en la consola no arranca te dara el error porque, buscas en google o preguntas por aqui si no lo ves claro. Si si que arranca con el startx la solucion sencilla es instalar gdm, kdm o xdm (yo uso el primero, el segundo es lo mismo pero de kde y el tercero es el mas feo de los tres, pero los tres sirven)
Saludos.
PD: Espero que por ftp te refieras a mediante apt-get, dpkg, aptitude o similar, sino te estas perdiendo la gracia debian.
