En principio no, y me temo que es una cosa casi imposible. Para hacer funcionar un dispositivo USB hacen falta drivers, y me temo que un adaptador no podria manejar el solo la entrada del mando, a menos que fuese uno especifico (en este caso para mandos de X360).
