Hola! Puede deberse a una mala conexión del cable (no por que lo hayas conectado tu mal, si no por problema del cable).
A mí también me pasó cuando la conecté por primera vez, cambié el cable de conexión y listo, de hecho ahora lo conecto a través de un alargador "Mini-Jack" a la tarjeta de sonido externa y todo va perfecto.
Prueba con otro cable, si el problema persiste, quizá sea falta de limpieza del puerto o incluso que esté dañado (aunque no creo, para que se dañen hace falta mucho).
Un saludo!