Claro que puedes, para eso esta el router con 4 salidas como el tuyo.
Tienes que tener un cable ethernet conectado desde uno de los 4 enchufes amarillos al pc y otro cable desde otro de los 4 amarillos a la consola.
Si haciendo eso te quedas en el PC sin conexion, debe ser por parametros internos del router o del pc, como tener una ip estatica interna.
Primero prueba a enchufar todo correcto y si te sigue fallando explica detalladamente que falla.