Para ver cual es la dirección IP del router puedes hacer lo siguiente:
Pincha en "Inicio" > "Ejecutar" y escribes "cmd" y das a enter.
Se abrirá una ventana del interfaz de comandos de MS-DOS, y en ésta escribes: "ipconfig /all" (sin las comillas) y das a enter
Te saldrá mucha información, y entre ella verás "Puerta de enlace predeterminada: XXX.XXX.XXX.XXX", que es la dirección IP de tu router.
Pon la dirección en el navegador y entrarás al interfaz de configuración del router, que te pedirá usuario y contraseña. Ahí si no te lo ha facilitado tu proveedor pues tendrás que llamarles y pedírselo, o mirar por foros específicos de adsl si suelen poner uno genérico y te vale.
Espero haberte ayudado. Saludos!!