Cara a rendimiento, lo mejor es tener la memoria virtual en un SSD, si es posible, para tener tiempos de acceso no muy lejanos a los de la RAM... por contra, esta práctica también es una de las que más desgaste introduce en un SSD, así que si es pequeño y relativamente poco durable (TLC, o MLC con NAND no muy allá) no es lo mejor.
Hagas lo que hagas, si tienes RAM suficiente para lo que haces habtiualmente, no deberías notar apenas impacto en el rendimiento con el cambio.
Saludos