A mi me paso eso en las últimas elecciones, las municipales, y también estaba acojonado.
Fui directamente al sitio en el que se gestiona todo eso (en Madrid esta en chueca, en otras ciudades ni idea) y comente lo que había pasado (no había estado en casa en 2 semanas y cuando lo VI era tarde) y me dijeron que no pasaba nada porque ya se lo habrían mandado a otra persona.
Una vez que has recibido la carta y la has visto si que tienes obligación de presentarte en la mesa, antes no.