Bueno. Ya encontré la solución por mi cuenta. Igual a alguien le sirve No era relacionado con la caché de los dispositivos, sino con la caché del kernel.
How to reduce Linux' write buffer for removable devices?
https://unix.stackexchange.com/questions/292024/how-to-reduce-linux-write-buffer-for-removable-devicesCon sudo no funciona esos comandos porque redirigen a otra zona. Pero lo he hecho con el editor nano. He cambiado el buffer de la ram al 2%. De serie estaba puesto al 20%. Con esto pasados 200mb de copia ya empieza a escribir a velocidad real. Antes lo hacía pasados 1 o 2gb y por eso daba velocidades irreales y tiempos de espera interminables también para desmontar el dispositivo.