Tienes que poner ambos equipos en el mismo dominio (o grupo de trabajo).
En la configuración del Router, normalemente en la pantalla principal tienes la opción de ponerle nombre al dominio.
En el Mac, en las Preferencias del Sistema, en el apartado Red, pones en "Dominios búsqueda" el nombre del dominio.
Por último en Windows, hablo de memoria, botón derecho sobre Mi PC, Propiedades, y en la pestaña Nombre cambias el nombre del Dominio.
Reinicias todo y supuestamente los dos equipos deberían de verse.
Saludos.