Me lo apunto, un botón para eliminar el service worker. Pero vamos, que si no tienes ninguna casilla marcada no te vamos a mandar nada, esto está pensado para ser totalmente opt-in. Y cuando pasa un tiempo sin usarse juraría que el navegador lo va a borrar, así que es lo mismo.
Mientras tanto, si bloqueas el acceso de EOL a notificaciones y lo vuelves a permitir (o no), el efecto es el mismo, porque el identificador que usamos para enviarlas se regenera. Si lo haces verás que la página te vuelve a pedir que actives las notificaciones, señal de que ha "perdido" el SW.