Lo único razonable que puedes hacer es añadirlo a la lista de contactos bloqueados en la config de whatsapp, para que no tenga acceso a info como tu estado, los cambios de config en tu perfil (foto, estado, ...), si estás en línea, tú última conexión, ... todo eso. Pero si tiene tu número en la agenda de teléfono, eso no podrás cambiarlo ni desde whatsapp ni desde ningún lado.