Tranquilo que así hemos estado todos en algún momento, yo no hace mucho... xD
Primero, antes que nada, debes saber qué placa tienes. Abre la ranura del UMD como verás en la imagen de ese hilo y fíjate qué números hay bajo. No se dejan ver mucho, así que tómate tu tiempo para estar seguro de qué placa tienes, porque deberás descargar uno u otro archivo según la que sea, como verás más adelante. En principio, lo que viene ahora vale para todas las placas, pero por si acaso.
En tu caso, al decir que tienes una 2.81, lo primero que debes hacer es actualizar a 3.03 (esto es bastante sencillo, no tiene mucho misterio). De ahí bajarás a 1.5 con el juego GTA: Liberty City Stories (probablemente esto sea lo más difícil, pero lo es no por dificultad que entraña hacerlo sino conseguir el juego de marras) y ya por último subirás a 3.52 M33, que es la última que ha salido.
Consigue el juego original como sea, bien alquilándolo o bien que te lo deje algún amigo, y entonces ya podrás hacer todo esto. Si quieres, mientras tanto, ve actualizándola a 3.03 para dejarla preparada para entonces.
Y por cierto, como habrás leído por ahí, aunque te cargues la PSP siempre podrás recuperarla gracias al método Pandora.