Siempre puedes hacer las cosas a mano en lugar de usando el diseñador.
El propio QtCreator lo usas solo para escribir código y para aprender puedes ir consultado en la ayuda, qt reference documentation, tutorials & examples. En particular, la parte de tutorials te enseña a crear los diferentes tipos de widgets, cómo se les dan propiedades y demás a mano y finalmente cómo hacer una aplicación de ejemplo.
Además, a pesar de que los tutoriales que hayas encontrado sean de qt3, si vas a empezar por lo más básico creo que no encontrarás muchos problemas en aplicarlos a qt4.