si tu swich es de los que llaman administrable o inteligente si tendras que configurarlo via WEB y por tanto si tendra una IP asignada, no es un router pero si tiene opcuiones de bloqueo y asignacion de ancho de banda para cada uno de sus puertos.
Un swich comun no forma parte de la red en el sentido de requerir una IP y el puerto que se usa para coenctarlo en serie con otros dispositivos sea swich o router suele llevar la etiqueta RX o Uplink o similar aunque en los modernos de hace algunos años ya no sulene traerlo porque ya puede usar cualquier puerto ademas de ya no requerir cable crossover.
El problema es que debes leer el manual porque quiza tu swich si necesite estar conectado a un puerto especifico -generalmente el segundo- para enlazarlo a otro swich o a un router, todas las computadoras deberan tener la IP automatica o la IP manual para empezar, ya cuando funcione puedes dejar alguna en manual y otras en automatico, si lo haces automaticop debera estar activo el servidor DHCP del router, si lo haces manual la Puerta de nelace o gateWay debe de ser la IP del router, la mascara de subred debe de estar de preferencia en 255.255.255.0, el grupo de trabajo debera ser el mismo para todos, con 98/98SE/ XP es facil hacer una LAN pero en VISTA hay que buscar mas opciones "escondidas". Tambien revisa cuantas maquinas tiene ajustado el router para asignarles IP, por ejemplo yo asigno solo 6 y cuando voy a una LAN party a veces se me olvida y solo funcionan las primeras 6 y las demas no.
Igual recuerda que estas dividiendo la conexion -su velocidad- entre las computadoras que esten conectadas.