La verdad que nunca he tenido ese problema con ninguno de todos los mandos de xbox que he tenido, que no son pocos.
Si roza, primero probaría a desmontarlo y mirar que todo esté en su sitio, cómo bien dices, limar y/o aplicar un lubricante podrían ser otras soluciones.
En Amazon, Mediamarkt y otros tantos comercios, suelen tener buenas ofertas en mandos cada cierto tiempo, por si quieres adquirir uno nuevo, o incluso con los rewards que tengas, podrías sacarlo a buen precio.