Para cubrirse las espaldas no, porque está obligado por la ley (si hablamos de que se fuese durante los diez minutos de su jornada laboral que aún le restaban, si no, puede hacer lo que le salga del higo).
Y sí, legalmente tienes todo el derecho a suspender tu actividad laboral si consideras que entraña un riesgo para tu salud o tu integridad. Ese derecho tiene una salvedad: si se considera que el riesgo no era real y ha habido mala fe, el trabajador puede ser sancionado. Pero para ello tendría que ir un inspector de trabajo tras recibir la denuncia, investigar el caso y decidir. Es para evitar que un currela pare con esa excusa cuando le salga de los cojones. En tu caso y tal y como lo has contado, tenías todo tu derecho. Y no te cortes en utilizarlo cuando creas que la situación así lo requiere, porque estás amparado por la normativa y además con la salud no se juega.