Para empezar a toquetear solo te tienes que fijar en dos parametros, el multiplicador (cpu clock ratio, o algo parecido) y el voltaje. No se que disipador tienes, puedes empezar con un oc bajo, 4.1 por ejemplo. Pones el multiplicador en 41 y el voltaje en 1.18v. Inicias el pc, entras en windows y le pasas un test de estabilidad, un prime95 en modo blend pro ejemplo. Si lo pasa (con ese voltaje lo pasa casi seguro) ve bajando el voltaje de poco en poco hasta que no lo pase, entonces lo dejas en el anterior valor estable. Ya tienes un oc hecho.
PD: de momento el voltaje en modo FIJO, nada de offset ni adaptive hasta que no sepas un poco mas.