Pueden ser mil cosas.
Velocidad de internet, sobretodo si es compartida con más gente ademas de la calidad del ISP. Fragmentación del disco, los torrents fragmentan mucho y eso ralentiza la velocidad de descarga. Antivirus analizando por ahí en medio. Aunque salga mucha gente que tenga el torrent no quiere decir que tenga que descargar ya sea por puertos porque la gente no tiene una velocidad de subida alta o compartir con pocas personas o los puertos no son los correctos... A veces he descargado algo y aun habiendo miles de personas disponibles no descargar nada tras unas semanas.
Uso uTorrent y sin problemas, 70MB/s normalmente y en 2 minutos 10GB descargados, si es que descargo algo claro ya que no suelo descargar nada ni por torrent ni descarga directa.
Oh ahora que pienso, también depende del servidor, por ejemplo, hay una web que comparte animes por torrent (no diré nombre), el único problema es que para descargar necesitas si o si compartir, cuanto más compartes más puntos y por tanto más descargas, si no compartes nada no descarga nada y si compartes poco pues descarga a velocidades ultra lentas, quizás el server que intentas descargar aunque lo tenga más gente tenga un limitador de velocidad para evitar sobrecargas o trafico, algunos servidores si superan cierto trafico o bien cobran un extra o bien cortan por lo sano la conexión.