Son elementos que extienden la funcionalidad de firefox. Más o menos lo que se suele entender por plug-in.
Lo de que para qué sirven... pues depende de qué extensión hables, las hay para todos los gustos: bloqueo de publicidad, administración de bookmarks, mayor control de los tabs...