No es dificil compilarse un kernel hoy dia (antes era mucho mas complicado). Eso si, tirate tiempo recopilando info exahustiva de tu hard, ya q el kernel tiene muchas opciones q te sonarán a chino. Lo suyo es compilarlo con make xconfig ya q aparte de darte unas pequeñas explicaciones de cada cosa podrás usar firefox para buscar las opciones q no reconozcas.
Una vez echo tienes un kernel solo para tu equipo, ligero y con los módulos justos para tu sistema, lo q descarga un poco el sistema de los "pesados" kernel q debian y derivados traen por defecto.