Soy usuario de las 3 y comentando lo que buscas, sin duda te recomiendo la PS Vita, a poder ser el modelo 1000 con su espléndida pantalla OLED. Con una Vita modificada se te abren un sinfín de posibilidades; emular PSP / PSX, posibilidad de jugar a los juegos de PSP a resolución nativa de Vita, RetroArch y su sinfín de emuladores de todas las plataformas retro imaginables y mil plugins y homebrew que suben infinidad de usuarios a diario a la web. Además si eres usuario de una PS4 puedes usar el juego remoto para jugar a juegos de PS4 en tu Vita desde donde quieras (siempre y cuando tengas buena conexión WiFi).
Switch es mejor consola, con mucho mejor catálogo, pero para temas de portabilidad la Vita me parece más cómoda. Casi siempre me llevo alguna portátil conmigo en la mochila, y la Vita casi siempre es mi elección predilecta. Así que mi voto es por la Vita sin duda.