Si los tendrias en red, de todas formas si me dices que tienes un router tambien podrias hacerlo.
De echo yo como lo tengo ahora mismo es asi, tengo un Router SMC Barricade al que tengo conectado el ordenador de sobremesa que utilizo para jugar y navegar, un barebone que tengo como servidor del emule y un portatil por "wifi", los tres comparten la conexion a internet y estan en red.
Creo que tu podras hacer lo mismo con tu router sin problemas ademas siempre tendras muchisimas mas opciones de configuracion y seguridad que con un simple hub, eso si lo de configurarlo no te puedo decir porque no e tocado nunca ninguno.
Y seria tan facil como conectar el cable moden a la conexion marcada como "wan" al menos en el mio la denomina asi, y a los ordenadores de tu red en las conexiones "Lan1" "Lan2" etc...
Luego tendrias que tener instalados en cada ordenador de la red los protocolos correspondientes "Netbios" que supongo que los tendras ya instalados porque si antes los tenias en red.
Luego tambien en propiedades de conexion a red en cada uno de los equipos doble click en "Protocolo internet (TCP/IP)" y selecciona la opcion automatica tanto en "direccion IP" como en "servidor DNS" tambien en la siguiente pestaña "configuracion alternativa" en "direccion IP privada" marcarla como automatica.
Bueno pues asi es al menos como yo lo tengo y funcionando a las mil maravillas compartiendo internet y en red, espero haberte ayudado y suerte, ya nos contaras.
Un saludo.